Ferramentas para Avaliao de

Software
Palestrante: Karin Cristina Siqueira Ramos
Local: GEIAAM
Data: 20.09.2001

Estgios do Desenvolvimento e Avaliao de Software

Que ferramenta usar para avaliar?

Questionrios;
Entrevistas;
Testes;
Observaes
...
Uma combinao destes.

Ferramentas de Avaliao
(http://mime1.marc.gatech.edu/MM_Tools
/evaluation.html)

Anedoctal Record (Relatrio de Ocorrncia)

Captura histrias importantes e incidentes

ocorridos
Gravar a descrio verbal do incidente
(testemunhado ou ouvido)
Separar a descrio da interpretao do
incidente

Anedoctal Record (Relatrio de Ocorrncia)

Exemplo:
Data: ____
Local: ____
Nome Observador: ______
Descrio do Incidente: ...
Interpretao: ....

Checklist para Reviso do Especialista

Usar na formativa (como o software multimdia

pode ser melhorado?) e tambm na somativa (qual
efetividade e utilidade do software?)

Preferencialmente para ser usado por designer

instrucionais

Diferenciar o checklist para o especialista no

contedo do checklist para o especialista em
interface

Checklist para Reviso do Especialista

Exemplo:
Nome do revisor: ____ Data: ____
a) Reviso do Design Instrucional
(clareza dos objetivos e do feedback, velocidade
apropriadas)

e dificuldade

b) Reviso do Design Esttico

(bom desenho da tela, cores apropriadas, displays fceis de entender)

c) Reviso da Funcionalidade Geral

(operao sem falhas)

Relatrio de Reviso Formativa

Qualquer pessoa pode fazer essa reviso do

software em seus estgios iniciais (inclusive
futuro usurio)

Tabela: identificao da tela

observaes (erros, questionamentos, dvidas)
aes a serem tomadas por projetistas

Relatrio de Reviso Formativa

Exemplo:
Nome: _____ Quando: _____

Tela
Menu
Principal

Comentrios

Ao Tomada

A palavra portfolio
soletrada errado

Soletrar corretamente

Protocolo de Entrevistas

Para coletar dados sobre as reaes dos

aprendizes e instrutores

Servem para identificar as questes mais

importantes relativas ao software

Selecionar uma amostra para aplicar

As perguntas geralmente so dissertativas

Protocolo de Entrevistas
Exemplo de Questes:
o
o
o
o
o
o

Qual sua especialidade?

Descreva sua 1a. reao com o IMM.
Descreva sua opinio atual sobre o IMM.
Quais problemas voc experimentou?
Que melhorias voc sugere?
Voc necessitou de treinamento extra para usar?

Questionrio

Tipo de instrumento mais freqentemente usado

para avaliao

Podem ser apresentados de vrias formas

(questes abertas, mltipla escolha, checklists)

Cuidar para que o questionrio no tome muito

tempo da pessoa

Dele podemos tirar muitas informaes, no

somente se usurio gostou do software.

Questionrio
Exemplo:

Nome curso : ___

Local: ____
Nome (opcional): ____
Data: ____

Contedo
Design
Instrutor
Ambiente
Resultados
Alcance
Individualizado
(20 tipo N/A 1 2 3 4 5)

Questionrio

Como voc melhoraria o curso?

(mltipla escolha)

Que outras melhorias recomendaria a esse

curso?

O que foi menos vlido nesse curso?

O que foi mais vlido nesse curso?

Formulrio de Julgamento de
Qualidade da Interface (Rating)

Interface com o Usurio (UI) um elemento crtico

que deve ser cuidadosamente avaliado

Formulrio com 10 critrios para julgar a UI

Nem todos os critrios so relevantes em todo tipo

de software

No se deve fazer esta avaliao com usurios

novatos em software interativos

Formulrio de Julgamento de
Qualidade da Interface (Rating)
(Desenvolvida por Reeves e adotada por Campos)

Facilidade de uso: Difcil

Fcil

Navegao: Difcil

Carga Cognitiva: Confusa

Mapeamento: Nenhum

Desenho Tela: Viola

Compatibilidade Espao Conhecimento : Incompatvel

Compatvel

Fcil
Intuitiva
Poderoso
Segue Princpios

Formulrio de Julgamento de
Qualidade da Interface (Rating)
(Desenvolvida por Reeves e adotada por Campos)

Apresentao Informao: Obtusa

Clara

Integrao Mdias: Descoordenada

Coordenada

Esttica: Desagradvel

Funcionalidade Geral:
Disfuncional
Altamente Funcional

Agradvel

Concluso
Existem vrias ferramentas que podem
ser usadas para avaliar um software, cada uma
com diferentes abordagens e facilidades.
Deve-se ento escolher aquela(s) mais
apropriada(s) e possvel de ser(em) usada(s).

Concluso
Por exemplo:
Um questionrio pode ser usado para
coletar informaes sobre as reaes globais
com um software. Depois, podem ser usadas
entrevistas para coletar informaes mais
detalhadas.