1. Definio do Plano de Avaliao O plano de avaliao do e-commerce Mercado Livre segue o paradigma Goal/Question /Metric (GQM).

GQM uma abordagem orientada a metas para a mensurao de produtos e processos de software, suportando a definio top-down de um programa e a anlise e interpretao bottom-up dos dados. O objetivo do mtodo GQM caracterizar e fornecer um melhor entendimento dos processos, produtos, recursos e ambientes e, assim, estabelecer bases para comparao com trabalhos futuros [Soligen 1999]. O GQM foi utilizada com sucesso em diversas empresas, como NASA-SEL (EUA), Robert Bosch GmbH (Alemanha), Allianz Lebensversicherungs-AG (Alemanha), Digital SPA (Itlia), Motorola, Schlumberger (Holanda). O paradigma GQM baseado no requisito de que a mensurao deveria ser orientada a metas. Essa metodologia baseia-se na premissa de que, para ganhar uma medida prtica, deve-se primeiro entender e especificar os objetivos dos elementos de software sendo medidos e os objetivos do processo de medio. Essa abordagem possui vrias vantagens: suporta a identificao das mtricas teis e relevantes, anlise e interpretao dos dados coletados. Pretende-se avaliar a interface do e-commerce, a disponibilidade do site em sanar as duvidas e dificuldades de seus usurios, a facilidade de fazer buscas e a satisfao do usurio que compra e/ou vende utilizando a plataforma do ecommerce. Avaliao de Usabilidade levou em considerao os atributos

Operacionalidade, facilidade que o usurio encontra na realizao de tarefas de compra e venda dentro do ambiente Mercado Livre; Facilidade de Aprendizagem, facilidade encontrada pelo usurio na utilizao do site para compras e vendas; Eficincia em Uso, eficincia do site em seu desempenho; Satisfao do usurio, o usurio torna-se satisfeito com o uso do site para fins de compra e venda.

1.1 Introduo O mercado de e-commerce vem crescendo nos ltimos 5 anos em mdia 30% ao ano. O virtual est engolindo silenciosamente o comrcio

convencional. Muitos dos usurios destas lojas online no esto preparados para participar de um comercio virtual. Os sites de e-commerce precisam ter uma interface amigvel e intuitiva, a fim de facilitar a utilizao, um desempenho eficiente e usurios satisfeitos. Atravs do mtodo GQM, foram definidos os objetivos de avaliao levando em considerao a usabilidade do e-commerce. A partir dos objetivos, foram levantadas questes com o objetivo de coletar dados de usurios que utilizam ativamente ou j utilizaram alguma vez o site e definir/ refinar as mtricas.

1.2. Definio dos Objetivos O modelo GQM identifica e defini objetos relevantes. A definio do objetivo envolve cinco aspectos: Objeto, Propsito, Foco de qualidade, Ponto de vista e Ambiente. O objetivo deve ser adaptado ao nvel de compreenso dos problemas no site, caracterizando a real situao. O objetivo tambm precisa ser adaptado estabilidade do processo e ao controle do desempenho. O enfoque de Usabilidade deve ser consistente com a prioridade de metas de melhoramento de interface e desempenho alm de enfocar os pontos fracos mais urgentes em relao ao processo de compra e venda do ecommerce. O Objetivo do GQM est leva em considerao o ponto de vista do usurio Universitrio que compra ou faz oferta de produtos. OBJETIVO (GOAL) OBJETIVO PROPSITO FOCO DE QUALIDADE Analisar Com o propsito de Com relao a Mercado Livre Avaliar Usabilidade, definida por: * - Operacionalidade Facilidade de

Aprendizagem - Eficincia de Uso - Satisfao do usurio

PONTO DE VISTA

Do ponto de vista do

Usurio que deseja realizar compra produtos. ou oferecer

AMBIENTE

No seguinte contexto

Universitrio de entre 17 e 30 anos que deseja efetuar uma online. compra ou venda

1.3 Definio das Questes A partir da definio do objetivo, foi criado um questionrio com 16 questes para explorar o usurio nos quesitos pr-estabelecidos.

O questionrio online foi aplicado nos alunos de diferentes cursos da Universidade Federal de Itajub. OPERACIONALIDADE 1) O cadastro do usurio, adicionar produtos para a venda so tarefas fceis de realizar dentro do site? 2) A atividade Vender (anunciar produto) pode ser desfeita com facilidade? 3) A seleo de algum produto para compra, antes do pagamento, pode ser facilmente cancelada? 4) Os produtos, divididos em categorias (tipo, preo, novo/usado) facilitam a busca, compra ou oferta do produto ?

FACILIDADE DE APRENDIZAGEM 5) Os erros, durante uma execuo de compra/venda, so notificados? 6) O vendedor recebe notificaes de procura pelo seu produto? O comprador recebe notificaes de feedback do vendedor? 7) A rea de contato com o vendedor suficiente para o usurio e esclarecer suas dvidas? 8) O link Contato e fcil de ser encontrado e utilizado?

EFICINCIA EM USO 9) O carregamento do site possui uma velocidade satisfatria?

10) O tempo de resposta do Mercado Livre durante a realizao de cada tarefa e considerado satisfatrio? 11) As tarefas de venda ou compra podem ser executadas de forma rpida e lgica, proporcionando uma boa produtividade ao usurio? 12) O acesso aos dados dos produtos cadastrados e considerado satisfatrio?

SATISFAO DO USUARIO 13) A aparncia do site mercado livre agrada o usurio? 14) A forma como os produtos esto dispostos (em categorias) agradvel ao usurio? 15) O usurio, que vende ou compra, se sente satisfeito com a estrutura que o site oferece? 16) O usurio recomendaria a utilizao do site?

1.4 Definio das Mtricas A escala adotada para o questionrio de usabilidade deste plano de avaliao a escala de Likert. Nesta, os usurios so requeridos a concordar ou discordar, conforme a preferncia, contribuindo com a escolha de um grau de satisfao. A cada resposta, atribudo um nmero que reflete a preferncia em relao a cada afirmao. A pontuao total de cada usurio dada pela somatria das pontuaes obtidas para cada afirmao. A escala adotada para o questionrio de usabilidade desta avaliao, varia de Discordo Completamente a Concordo Completamente: 1. Discordo Completamente; 2. Discordo; 3. Indiferente; 4. Concordo; 5. Concordo Completamente

4
5

1.5 Instrumentos de Avaliao Para a coleta de dados da avaliao de usabilidade foi utilizado a aplicao de um questionrio online onde foi possvel traar um perfil da atitude dos usurios em relao aos requisitos Operacionalidade, Facilidade de Aprendizagem, Eficincia de Uso e Satisfao. Inicialmente foram obtidos dados descritivos como mdias e desvio padro.

1.6 Tratamento das Ameaas Validade

????????

2. Execuo da Avaliao

2.1

Definio dos Participantes

O plano de avaliao considera como participante os universitrios da Universidade Federal de Itajub que cursam Sistemas da Informao. Todos universitrios que cursam com idade entre 17 e 30 anos puderam colaborar e responder a um questionrio online como usurios do e-commerce Mercado Livre. A populao de universitrios foi representada por um total de 16 participantes. 2.2

Coleta de Dados

A coleta de dados do plano de avaliao do Mercado Livre foi realizada entre 10/10/2013 e 14/10/2013. Um link foi disponibilizado onde os usurios, que no precisavam se identificar, respondia um questionrio de avaliao de usabilidade contendo perguntas a respeito dos atributos operacionalidade,; facilidade de aprendizagem, eficincia em uso, e satisfao do usurio. Aps o recebimento das respostas dos questionrios, foi possvel realizar a anlise dos dados.

2.3

Anlise dos Dados

Os dados extrados do questionrios foram tabulados, afim de facilitar a visualizao e analise.

2.3.1 Participao na pesquisa TOTAL DE ALUNOS DE S.I. POR ALUNOS QUE RESPONDERAM 2.3.2 Registro original dos dados da pesquisa 2.3.3 calculo alguns indicadores estatsticos 2.3.4 quantidade de respostas por alternativas da escala 2.3.5 media por atributo 2.3.6 dados descritivos gerais

2.4

Resultados Obtidos

2.5

Concluso

REFERENCIAS Soligen, R. e Berghout, E., (1999) The goal/question/metric method A pratical guide for quality improvement of software development.

Ramos, C. S.; Oliveira, K. M (2004). Conhecendo Sistemas Legados atravs de Mtricas de Software. In: III Simpsio Brasileiro de Qualidade de Software.