Colabora

5. Definição das questões para avaliação

5. Definição das questões para avaliação:

Primeiramente foi elaborada uma 1ª versão do questionário a ser usado para a avaliação das características de usabilidade do produto. As questões dos relatórios foram definidas conforme abaixo:

• critérios baseados nas normas ISO/IEC 12119 que estabelecem os requisitos de qualidade de um pacote de software e fornecem instruções sobre como testar o software em relação a esses requisitos;
• questionário elaborado por Lima (2000);
• normas ISO/IEC 9126-1 que apresentam um conjunto de características de qualidade; aplicáveis a qualquer produto de software;
• atributos e heurísticas de usabilidade de Nielsen (1994);
• critérios referentes às características pedagógicas (CAMPOS, G., 1994), específicas de software educacional do tipo “Exercício e Prática” e “Tutorial”.

Depois de formulada a 1ª versão do questionário, foi realizada uma reunião com cada grupo de professores para a apresentação e explicação dos objetivos da avaliação. Várias questões pertinentes à avaliação de um site educacional foram levantadas de acordo com a visão de cada grupo de professores:

• Professores da área técnica em informática levantaram questões como uma boa interatividade, a existência de plantão de dúvidas, biblioteca virtual digital, ferramentas de groupware, help on-line, veracidade do conteúdo, utilização fácil e rápida.
• Professores do ensino fundamental e do ensino médio questionaram quanto à validade da certificação oferecida por cursos disponíveis na internet, os vícios de linguagem em chats, a correção gramatical das informações contidas nas páginas destes sites, a ubiqüidade do professor e se o mesmo é pedagogicamente válido.

Essas questões foram amplamente discutidas e concluiu-se que alguns pontos importantes e pertinentes à avaliação do site a ser avaliado ainda não estavam sendo contemplados nos questionários dos dois grupos. Então, essas foram inseridas, finalizando a última versão de cada questionário.

A Tabela IV mostra algumas questões aplicadas na avaliação em relação às características técnicas dadas aos professores da área de informática.

Tabela IV: Questionário de avaliação dos professores da área técnica em informática

01. As informações estão organizadas de forma lógica?

( ) 0-Nunca ( ) 1-Quase nunca 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

02. As informações estão organizadas de forma hierárquica?

( ) 0-Nunca ( ) 1-Quase nunca ( )2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

03. Você acha fácil ler o que aparece na tela?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

04. Você entende que está lendo na tela?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

05. As orientações que o software dá sobre como utilizá-lo são fáceis de serem entendidas?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

06. Você consegue entender o que os exercícios pedem para você fazer?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

07. Você consegue dominar o conjunto de informações apresentadas para fazer uma avaliação final tranqüila?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

08. A homepage possui uma quantidade adequada de informações, o que a faz não ser confusa?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

09. Os botões de navegação fazem o que esperamos?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

10. A homepage possui ícones claros o suficiente para não gerar ambigüidade?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

11. Os títulos dos botões ajudam a navegação?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

12. Os textos são curtos e diretos?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

13. Em caso de erro, eles são tratados e informados claramente?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

14. O site oferece feedback para cada resposta ou exercício resolvidos?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

15. O site oferece um resumo do desempenho do aluno ao final da sessão?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

16. O site possui um mapa com a organização de todo o seu conteúdo?

( ) 0-Não ( ) 4-Sim

17. O site oferece um indicador de onde você se encontra no mapa do site?

( ) 0-Não ( ) 4-Sim

18. É preciso percorrer muitas páginas para se chegar a informação desejada?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

19. É possível navegar pelo site sem visualizar as figuras no modo somente texto?

( ) 0-Não ( ) 4-Sim

20. O site dá instruções de como agir em situações de erro?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

21. As imagens, os vídeos e os sons são utilizados de forma agradável?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

22. O site oferece ajuda (help)?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

23. É fácil encontrar a explicação para sua dúvida?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

24. As explicações da ajuda realmente são eficientes, quando necessário?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

25. O site possui opção de busca com resultados satisfatórios?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

26. O site possui um material complementar para acesso do aluno?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

27. O site possui opção de busca com resultados satisfatórios?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

28. O site possui um mapa com a organização de todo o seu conteúdo?

( ) 0-Não ( ) 4-Sim

29. O site oferece um indicador de onde você se encontra no mapa do site?

( ) 0-Não ( ) 4-Sim

30. É possível navegar pelo site sem visualizar as figuras no modo somente texto?

( ) 0-Não ( ) 4-Sim

31. O tempo de espera para a página ser carregada é aceitável?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

32. Os aplicativos executados a partir do site tiveram um bom desempenho?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

33. As informações podem ser impressas facilmente?

( ) 0-Não ( ) 4-Sim

34. A impressão é legível?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

35. Para os textos muito grandes, a página fornece a opção de download?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

36. O site oferece opção de interatividade com instrutor?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

37. Existe opção para contacto com a equipe de manutenção do site?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

38. Você obteve resposta de algum contato efetuado?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

39. O site possui um sistema de fórum, chat ou lista de discussão?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

A Tabela V mostra algumas questões aplicadas na avaliação em relação às características educacionais dadas aos professores do ensino fundamental e do ensino médio.

Tabela V: Questionário de avaliação dos professores do ensino fundamental e do ensino médio

01. O site é de uma entidade reconhecida e respeitada?

( ) 0-Nâo ( ) 4-Sim

02. O site é interessante?

( ) 0-Não ( ) 4-Sim

03. O título do site é significativo e está de acordo com o seu conteúdo?

( ) 0-Não ( ) 4-Sim

04. As informações apresentam as fontes de onde foram retiradas?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

05. As informações são coerentes com o que existe na literatura?

( ) 0-Não ( ) 4-Sim

06. Os textos possuem o nome dos autores?

( ) 0-Nunca ( ) 1-Quase nunca ( )2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

07. A homepage apresenta um sumário das informações que o site contém?

( ) 0-Não ( ) 4-Sim

08. A homepage informa a data da última atualização do site?

( ) 0-Não ( ) 4-Sim

09. A linguagem utilizada está de acordo com seu nível de conhecimento no assunto?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

10. Quando o software utiliza demonstrações, você entende as palavras que ele usa?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

11. As informações estão organizadas de forma lógica?

( ) 0-Nunca ( ) 1-Quase nunca 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

12. As informações estão organizadas de forma hierárquica?

( ) 0-Nunca ( ) 1-Quase nunca ( )2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

13. Você acha fácil ler o que aparece na tela?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

14. Você entende que está lendo na tela?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

15. As orientações que o software dá sobre como utilizá-lo são fáceis de serem entendidas?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

16. Você consegue entender o que os exercícios pedem para você fazer?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

17. Você consegue dominar o conjunto de informações apresentadas para fazer uma avaliação final tranqüila?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

18. A homepage possui uma quantidade adequada de informações, o que a faz não ser confusa?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

19. O site fornece explicações sobre os componentes quando posicionamos o mouse?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

20. As fontes utilizadas são legíveis?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

21. A formatação do texto utilizada facilita a leitura?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

22. O texto é apresentado na forma de itens?

( ) 0-Não ( ) 4-Sim

23. São utilizados recursos de editoração para enfatizar e ressaltar partes do conteúdo?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

24. As imagens, os vídeos e os sons são utilizados de forma agradável?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

25. Fornece explicações sobre os componentes quando posicionamos o mouse?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

26. Quando você foi executar uma tarefa que já havia realizado antes, foi fácil lembrar como deveria ser feita?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

27. Os botões de navegação fazem o que esperamos?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

28. A homepage possui ícones claros o suficiente para não gerar ambigüidade?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

29. Os títulos dos botões ajudam a navegação?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

30. Os textos são curtos e diretos?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

31. Em caso de erro, eles são tratados e informados claramente?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

32. O site oferece feedback para cada resposta ou exercício resolvidos?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

33. O site oferece um resumo do desempenho do aluno ao final da sessão?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

34. O site possui um mapa com a organização de todo o seu conteúdo?

( ) 0-Não ( ) 4-Sim

35. O site oferece um indicador de onde você se encontra no mapa do site?

( ) 0-Não ( ) 4-Sim

36. É preciso percorrer muitas páginas para se chegar a informação desejada?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre

37. É possível navegar pelo site sem visualizar as figuras no modo somente texto?

( ) 0-Não ( ) 4-Sim

38. O site dá instruções de como agir em situações de erro?

( ) 0-Nunca ( ) 1-Quase nunca ( ) 2-Às vezes ( ) 3-Quase sempre ( ) 4-Sempre ( ) Não se aplica

39. O site, oferece na homepage uma opção para cada categoria de usuário?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

40. Com relação a questão anterior, esta opção está claramente demonstrada?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

41. O site oferece ajuda (help)?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

42. É fácil encontrar a explicação para sua dúvida?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

43. As explicações da ajuda realmente são eficientes, quando necessário?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

44. O site possui opção de busca com resultados satisfatórios?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

45. O site possui um material complementar para acesso do aluno?

( ) 0-Não ( ) 4-Sim ( ) Não se aplica

As questões visaram abranger todas as características necessárias para se obter um site educacional de qualidade na web. Para a conclusão da avaliação foi utilizada a seguinte escala:

Tabela VI: Graduação para a avaliação

Graduação	Limites de graduação
0 – Extremamente desaconselhado	0% a 1%
1 – Não recomendado	2% a 15%
2 – Pode ser útil em alguns casos	16% a 50%
3 – Recomendado	51% a 85%
4 – Altamente recomendado	86% a 100%

use as setas de navegação abaixo para consultar o artigo completo