O documento analisa os princípios para avaliações eficazes de cursos online e encontra que a maioria das avaliações usadas não seguem estas diretrizes. Muitas perguntas ignoram aspectos importantes como a interação entre alunos e o envolvimento ativo no aprendizado. O estudo recomenda usar os princípios identificados na literatura para construir avaliações que forneçam feedback útil sobre a experiência online.

1. CONSIDERATIONS FOR DEVELOPING EVALUATIONS OF ONLINE COURSES ACHTEMEIER, Sue D.; MORRIS, Libby, V.; FINNEGAN, Catherine L. Concepção e Avaliação em e-Learning

2. Enquadramento 19-11-09 O texto é um estudo que classifica os princípios recolhidos a partir de uma extensa revisão da literatura que foca o que actualmente melhor se faz com vista a um ensino-aprendizagem eficaz em cursos on-line. Nele, a partir de uma revisão dos instrumentos de avaliação actualmente em uso em treze instituições da Geórgia e vários cursos on-line a nível nacional, procura encontrar-se a presença desses princípios nos itens recolhidos. (EUA)

3. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 As boas práticas no processo de ensino-aprendizagem devem: (Chickering & Gamson) Encorajar o contacto entre o aluno e o professor Encorajar a cooperação entre estudantes Encorajar a aprendizagem activa Enfatizar tempo na tarefa Comunicar expectativas altas Respeitar diversos talentos e formas de apreender

4. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 A avaliação deve ser precedida dos resultados a obter A avaliação deve distinguir as questões formativas e sumativas A avaliação tem de ter a forte capacidade de "buy-in“ Devem ser utilizados múltiplos métodos Os resultados da avaliação devem ser usados e partilhados - A própria avaliação deve ser avaliada Aspectos para a qualidade da avaliação : (Palomba & Banta)

5. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 Porque se realiza a avaliação? (Why) Foca o estudante ou a experiência do docente? É o desenho do curso? É a entrega? o que mudará? - Que resultados estão a ser avaliados? a que nível? (What) - Quando deverá ser realizada a avaliação? (When) - Onde e como deverá ser realizada a avaliação? (Where) - Quem deverá estar envolvido? (Who) Questões para planear a avaliação: (Cuseo)

6. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 - Boas questões devem ser trabalhadas de forma clara e simples, sem serem enviesadas ou conduzidas para obter uma resposta isenta. - A cada questão deve corresponder um só assunto e apresentar categorias de resposta adequadas. - As questões devem seguir uma ordem lógica indo, preferencialmente, do geral para o específico, deixando as questões mais pessoais para o final do instrumento de avaliação. Standards para obter respostas dos alunos: (Marsh)

7. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 A aula encoraja os estudantes a uma participação activa no seu próprio processo de aprendizagem? É a aprendizagem fundamentada e efectiva, por exemplo: contextual, autentica, baseada em casos, exemplos? É encorajada a resolução de problemas de forma colaborativa? O feedback é compatível com o desempenho? - A Instrução integra componentes motivacionais para a auto-eficácia e desafio? Princípios para avaliar a aprendizagem duradoura em salas de aula on-line: (Hacker & Neiderhauser)

8. Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento 19-11-09 Dimensões da aprendizagem interactiva que podem contribuir para a compreensão do que a instrução baseada na WEB pode comportar: (Reeves & Reeves) Papel do professor Suporte metacognitivo Aprendizagem colaborativa Sensibilidade cultural Flexibilidade estrutural Fonte de motivação Orientação da tarefa Teoria da aprendizagem Orientação dos objectivos Filosofia pedagógica

9. Conclusões do Estudo: 19-11-09 A maior parte dos cursos não cumprem os princípios preconizados para boas práticas. “ This research found a great disjuncture between the guidelines suggested for effective teaching and learning and the principles that were evaluated by the end-of-course evaluation instruments. The absence of questions dealing specifically with the online environment suggests that many instruments used in the evaluation of online instruction were likely taken from traditional course settings and applied directly to evaluate computer-mediated instruction.”

10. Conclusões do Estudo: 19-11-09 As avaliações dos cursos são "tendenciosas", ou seja, incidem sobre aspectos que levam aos resultados desejados. Houve princípios nem sequer abordados. “ This failure to construct an instrument specific to the educational environment allows much important information to escape assessment and may introduce irrelevant questions and erroneous information into the evaluation process. ”

11. Conclusões do Estudo: 19-11-09 Apenas 8 dos 18 princípios identificados como importantes para o ensino aprendizagem foram avaliados por esses instrumentos de avaliação. Notavelmente ausentes estiveram perguntas sobre a cooperação entre os alunos e a aprendizagem activa, elementos importantes para a aprendizagem on-line. Nenhuma das avaliações do curso questionou se o aluno participou em conversas on-line com o "instrutor" ou colegas de turma durante o curso, embora o diálogo seja considerado fundamental como estratégia de ensino para a construção de uma comunidade de aprendizagem on-line.

12. Conclusões do Estudo: 19-11-09 “ A lesson learned from these observations is that evaluation instruments seem to include what someone decides to ask the students at a given time.” Não parece que a teoria do que constitui a melhor prática de ensino e de aprendizagem tenha sido considerada na elaboração destes instrumentos de avaliação.

13. Recomendações: 19-11-09 Com base nos princípios de Cuseo, construir instrumentos de avaliação para o ensino - aprendizagem que permitam um "feedback" real sobre o curso implementado ou a implementar. “ Results of this study suggest a need to go back to Cuseo’s guidelines and consciously make them the starting point for the construction or revision of any online course or faculty evaluation instrument .Before creating such an instrument, one might attempt to answer Cuseo’s questions (why, what, who, when and where).”

14. Recomendações: 19-11-09 Se os sete princípios de Boas Práticas no Ensino de Graduação deverão ser abordados nas questões de avaliação, deve-se ter certeza de que tal acontece. Podem também ser consideradas as questões sugeridas por princípios de Effective Teaching in the Classroom on-line, a fim de reforçar a utilidade de um instrumento para avaliação de cursos on-line.

15. 19-11-09 Trabalho realizado por: Luciana Grof Maria Leal Sónia Valente Teresa Rafael