Este documento descreve a aplicação de métodos etnográficos para avaliar a usabilidade de dispositivos móveis utilizados para coleta de dados estatísticos pelo Instituto Brasileiro de Geografia e Estatística (IBGE). Os autores observam o uso dos dispositivos em contextos reais, entrevistam usuários e analisam os resultados para melhorar a interface e a experiência do usuário.
1. Observações Etnográficas na Avaliação da
Usabilidade de Dispositivos Móveis de Coleta de
Dados Estatísticos
Patricia Tavares
UNIRIO e IBGE
patricia.tavares@uniriotec.br
Luiz Agner
IBGE e UniverCidade
luizagner@gmail.com
Simone Bacellar Leal Ferreira
UNIRIO
simone@uniriotec.br
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
U IRIO
1 / 15
2. Objetivo
Apresentar um método proposto a partir da
flexibilização dos testes de usabilidade, de modo
a que pudessem ser adaptados ao contexto
específico do IBGE.
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
2 / 15
3. Aplicação
PNAD Contínua
Teste da metodologia e do sistema;
Outubro de 2009 a Dezembro de 2009: PA, PE, RJ, SP, RS e
DF;
2010: teste no RJ;
2011: oficialmente implementada
em todo o país
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
3 / 15
4. Aplicação
Investimento do IBGE
em mobilidade
• 80 mil PDAs
• 150 mil smartphones
• 230 mil instrumentos
de mão (total)
• 190 mil recenseadores
(fora outros)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
4 / 15
5. Aplicação
Avaliação da
usabilidade do
aplicativo para o PDA
da Pesquisa Nacional
por Amostra de
Domicílios Contínua
(PNAD Contínua) do
Instituto Brasileiro de
Geografia e Estatística
(IBGE).
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
5 / 15
7. Etapas
Pesquisa bibliográfica e documental
Observações em contexto de uso (“observações
etnográficas”)
Seleção da amostra de participantes
Entrevistas baseadas em cenários e tarefas
Análise dos resultados
Comunicação dos resultados
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
7 / 15
8. Métodos de Coleta de Dados
Papel Computador
(PAPI) (CADC ou CADAC, CASIC, CAI)
CATI CAPI CASI CAWI
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
8 / 15
9. Método CAPI
• Entrevista pessoal, um entrevistador;
• Direcionada a entrevistado(s);
• Computador (smartphone, notebook,
netbook ou PDA);
• MCAPI (Mobile Computer-Assisted Personal
Interviewing);
• Término: dados transmitidos para outro
computador;
• Dados agregados a outros dados
(LEEUW, HOX & SNIJKERS, 1998; WEISBERG & BEAMAN, 2001)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
9 / 15
10. Características do CADC
• Perguntas orientadas na ordem correta;
• Algoritmo;
• Configuração da ordem e do tipo de questões
• Baseando-se nas respostas anteriores
• Informação sobre o entrevistado
• Inseridos por entrevistador ou pelo entrevistado
(LEEUW, HOX & SNIJKERS, 1998)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
10 / 15
11. Migração de PAPI para CAPI
• Qualidade dos dados melhora;
• Verificações de consistências;
• Elimina a etapa de digitação;
• Questionários complexos;
• Respostas apropriadas
• Saltos complexos entre perguntas;
• Inserção de tecnologias (GPS)
(GRAVLEE et al., 2006)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
11 / 15
12. Migração de PAPI para CAPI
• A tecnologia pode transformar o contexto da entrevista;
• Sensação de um evento importante;
• Curiosidade para observar ou participar das entrevistas;
• Qualidade dos dados melhora;
• Maior grau de profissionalismo à pesquisa;
• Ajuda a “quebrar o gelo”;
• Bem aceita
(LEEUW, HOX & SNIJKERS, 1998)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
12 / 15
13. Técnicas Etnográficas em IHC
• Identificar as necessidades do usuário;
• Enxergar o sistema pelo olhar do usuário;
• Descobrir o “real” trabalho realizado;
• Registrar revelações sobre como o sistema é
utilizado no campo;
• Trazer o espírito da pesquisa social
etnográfica e aplicá-lo a um nível micro.
(BURKE & KIRK, 2001; COOPER, REIMANN & CRONIN, 2007)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
13 / 15
14. Resultados
• Reunião para comparar e discutir as observações;
• Recomendações técnicas;
• Disseminação da usabilidade;
• Evidências embasaram e reforçaram os testes de
laboratório;
• Apresentações e seminários (fotos e vídeos)
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
14 / 15
15. Obrigada ☺
Patricia Tavares
UNIRIO e IBGE
patricia.tavares@uniriotec.br
Luiz Agner
IBGE e UniverCidade
luizagner@gmail.com
Simone Bacellar Leal Ferreira
UNIRIO
simone@uniriotec.br
U IRIO Patricia Tavares, Luiz Agner, Simone Bacellar Leal Ferreira
U IRIO
15 / 15