Observing The User Experience | Mike Kuniavsky ALUNA: BIANCA GALVO | PROFESSOR: LUIZ AGNER DISCIPLINA: FERRAMENTAS DE COLETA DE DADOS CURSO: ERGODESIGN DE INTERFACES INTRODUO ARTE CINCIA Analisar resultados de questionrios uma tarefa que tangencia tanto a arte como a cincia, j que a interpretao humana une-se tabulao dos nmeros. Devido possibilidadede de erros determinada por ambiguidades, exageros nas respostas ou perguntas mal formuladas, o ideal que sejam usados mtodos mais simples de anlise, como: contagem e comparao. CONTAGEM | MDIA Antes de fazer a contagem sempre interessante analisar o resultado cru da pesquisa, pois dessa maneira j possvel ter uma ideia das tendncias antes de obter resultados. Depois de somar todas as respostas, para obter o resultado possvel calcular a mdia, a moda e a mediana. A mdia calculada a partir da soma dos valores (variveis) multiplicados pelo nmero de suas ocorrncias e divididos pelo nmero total de respostas (N). Porm, a mdia pode ser influenciada caso algumas respostas apresentem valores extremos. Por isso importante considerar a anlise pura da pesquisa. MDIA (X . 2) + (Y . 3) + ... + (Z . 5) N CONTAGEM | MODA A moda pode ser usada para avaliar se a mdia est distorcida por uma minoria, pois faz o mesmo clculo usando apenas o valor mais comum nas respostas. Se o site atrai dois perfis diferentes de pessoas, os valores da mdia e da moda sero diferentes. A diferena entre a mdia e a moda importante para identificar se h um grupo homogneo ou vrios subgrupos na amostra. MODA (W . 8) N CONTAGEM | MEDIANA A mediana o valor encontrato na posio do meio do somatrio de respostas. Somando o nmero de respostas (N) a 1 e dividindo por 2 decobre-se o elemento cujo valor encontra-se na metade dos resultados. Da mesma forma, a mediana tambm pode mostrar se a mdia est afetada, caso seu valor seja diferente da mesma. MEDIANA (N + 1) 2 COMPARAO A comparao o verdadeiro poder dos questionrios para alcanar o resultado desejado. Como exemplo, pode-se comparar as perguntas: Com que frequncia visita o site? e Porque est visitando o site hoje?. Uma das tcnicas de comparao que pode ser usada para isso a tabulao cruzada, que funciona da seguinte maneira: IDENTIFICAR AS VARIVEIS INDEPENDENTES Aquelas que afetam o sujeito da pergunta. AGRUPAR AS RESPOSTAS De acordo com as diferentes variveis independentes. TABULAR AS RESPOSTAS DAS VARIVEIS DEPENDENTES Para cada varivel independente, quais as dependentes. GERAR UMA TABELA Com os valores de ambas as variveis a fim de compar-las. 1. 2. 3. 4. COMPARAO Com a tabulao cruzada possvel comparar os resultados de duas variveis, no caso entre duas perguntas, e assim entender como uma afeta a outra. A tabela abaixo cruza os dados das duas perguntas para determinar como a frequncia de visitao afeta o objetivo do usurio ao acessar um site de e-commerce. INDEPENDENTES DEPENDENTES Ver novidades 10 74 35 50 5 55 60 1 10 120 80 100 Comprar produto Indicar produto 1 vez por ms 1 vez por semana 1 vez por dia TOTAL ESTIMANDO ERROS | ERRO PADRO Como toda pesquisa usa apenas uma amostra do total de usurios, qualquer resultado encontrado apenas uma estimativa. Porm, existem formas de calcular se o resultado alcanado est prximo ou no do real. O erro padro uma forma de medir a preciso dos clculos. Na equao, o P a porcentagem de respostas adquiridas, o Q (1 - P) e o N o nmero de amostras (usurios) estudados no total. Quanto menor o valor do erro padro, mais preciso o resultado. ERRO PADRO P . Q N = ESTIMANDO ERROS | DESVIO PADRO O desvio padro uma medida de confiana. Ele mostra a probabilidade de a resposta real estar ou no na poro definida pelo erro padro. A partir de uma distribuio normal, os valores utilizados para a anlise so: 68% de chance de o valor real estar dentro da variao de um erro padro, 95% de chance de o mesmo estar dentro da variao de dois erros padres e 99% de estar dentro de trs erros padres. O intervalo de confiana mostra como o erro padro e o desvio padro relacio- nam-se. O valor adquirido na per- gunta (50%) fica no centro e a porcentagem encontrada como erro padro (3%) gera os intervalos que determi- nam o desvio padro. DESVIO PADRO 68% 95% 99% 50% 47% 44% 41% 53% 56% 59% ERROS DE MEDIO Mesmo que a partir desses clculos esteja provada a preciso do resultado, ainda assim possvel ocorrer erros sistemticos, que podem afetar os dados de forma geral. Se as perguntas apresentarem ambiguidade e consequentemente erros de interpretao, sistematicamente o resultado estar errado, pois o mesmo no estar respondendo corretamente dvida inicial da pesquisa. TIRANDO CONCLUSES O importante do questionrio que as perguntas feitas no incio da pesquisa sejam respondidas. Antes de chegar a qualquer concluso necessrio avaliar se o resultado cumpriu tal propsito. Assim sendo, quando tira-se concluses sobre os dados, alguns proplemas podem ocorrer: CONFUNDIR CORRELAO COM CASUALIDADE Dois eventos simultneos podem no estar relacionados. NO DIFERENCIAR SUBPOPULAES As tendncias podem vir de mais de um grupo de usurios. CONFUINDIR CRENA COM VERDADE As respostas podem representar o que o usurio apenas acredita ser verdade, e no a verdade de fato. 1. 2. 3. TIRANDO CONCLUSES Alm disso, existem os problemas de natureza das respostas das pessoas, que devem ser levados em considerao ao interpretar os resultados: AS PESSOAS QUEREM TUDO Alguns no priorizam, marcam todas as opes possveis. AS PESSOAS VO RESPONDER SEM TER CERTEZA Alguns tem medo de no ter opinio. AS PESSOAS EXAGERAM Alguns dizem ser o que no so. AS PESSOAS TENTAM ADVINHAR O MOTIVO DA PESQUISA Alguns tentam responder o que a pesquisa quer. AS PESSOAS MENTEM Alguns sentem vergonha ou no esto confortveis. 1. 3. 2. 4. 5. CONCLUINDO A PESQUISA Aps a anlise do questionrio, no se deve considerar a pesquisa completa. Os questionrios mostram como as pessoas se sentem e pensam sobre si mesmas ou sobre o produto, mas so limitados para dizer porque elas se sentem assim. Por isso so necessrios outros tipos de pesquisa qualitativa como: grupos de foco, para entender os valores das pessoas; investigao contextual, para entender o comportamento das pessoas; testes de usabilidade, para entender as decises e percepes das pessoas. Outras dicas para concluir a pesquisa de forma satisfatria so: rastrear os questionrios apresentando o mesmo repetidamente para grupos de pessoas similares; refinar as caractersticas do grupo que participa dos questionrios; lanar questionrios pr e ps algum evento ou mudana para avaliar os resultados dos mesmos.