Estratégias de avaliação
 formativa num curso de
formação de professores
          online
                   Luís Tinoca1 & Isolina Oliveira2

1   Instituto de Educação, Universidade de Lisboa
                      2LE@D, Universidade Aberta
Questões de investigação
1) De que modo as ferramentas previstas
   (atividades formativas e fóruns online) no
   modelo pedagógico contribuem para a
   regulação do processo de aprendizagem?

2) Como é que o e-fólio e o feedback associado
   contribuem para o desenvolvimento de
   competências dos professores?
Um modelo pedagógico para o
  ensino online (Pereira et al., 2007)

  Flexibilidade

  Apredizagem centrada no estudante

  Interação

  Inclusão Digital
Modelo pedagógico 1º ciclo
Elementos essenciais no modelo
          pedagógico (1º ciclo)
Plano de tutoria

- Plano de Unidade Curricular (PUC)
- Plano de Atividades Formativas
- Cartão de Aprendizagem

    E-fólio – documento digital colocado online que
    constitua uma amostra esclarecedora de que o
    estudante desenvolveu uma dada competência
Tipos de e-fólios
Tarefa                     Definição

Ensaio                     composição escrita, análise, reflexão


Exercício prático          aplicação, demonstração


Construção de artefactos   blogue, fotografia, poster, vídeo, slideshow,...


Comentário crítico         emitir opinião fundamentada


Projeto                    desenhar um plano de ação


Relatório                  de campo, de trabalho experimental

Ficha de leitura           leitura orientada sintetizando as principais ideias de um texto
Qualidade da avaliação digital
                                  (Pereira, Oliveira e Tinoca, 2010)


                  autenticidade




praticabilidade                      consistência




                  transparência
Contexto
Curso de Profissionalização em Serviço

2 cadeiras (entre 7): Prácticas e TIC; Modelos de
Avaliação Pedagógica

630 professores, com um mínimo de 5 anos de
experiência

2 tipos de avaliação:
       E-folio (online)
       P-folio (f2f)
Metodologia
Design-Based Research
(Bereiter, 2002; Anderson, 2005)


Questionário online (n=494)

Reflexões críticas
Categorias de análise
Categorias                Definições                                       Alfa Cronbach
Temas (4 itens)           Conteúdos estudados em cada curso                    .810
Recursos de               Recursos de aprendizagem digitais (livros,           .757
aprendizagem (4 itens)    artigos, wiki, vídeos, blogues, ...)
Atividades formativas     Tarefas apresentadas pelo professor ou               .828
(3 itens)                 tutor incluindo orientações de respostas
Interações nos fóruns     Discussões nos fóruns online                         .805
online (4 itens)
E-fólios (4 itens)        Pequeno documento digital elaboardo pelo             .891
                          estudante e publicado online
Feedback (3 itens)        Informação dada aos estudantes sobre o e-fólio       .894
                          no sentido de melhorar a sua aprendizagem e
                          prática
Transparência (3 itens)   Práticas de avaliação adequadas e justas             .844
Processos regulatórios    Análise e reflexão visando a melhoria da sua         .862
(4 itens)                 própria aprendizagem e prática
Resultados
Dimensões                       Média (%)   DP (%)
Temas                              74        14
Recursos de aprendizagem           74        13
Atividades formativas              73        16
Interacções nos fóruns online      64        14
E-fólios                           83        15
Feedback                           71        18
Transparência                      72        15
Processos regulatórios             73        14
Autenticidade




 Similitude     Complexidade   Adequação    Significância
competências       desafio     condições      valor para
necessárias à     cognitivo                  estudantes,
                                   de
  vida real/                                professores e
                               realização   empregadores
 profissional                  adequadas
Avaliação autêntica
Gostaria de destacar a importância que a
realização dos e-fólios tiveram na aprendizagem
que desenvolvi: se o 1º foi importante na medida
em que me proporcionou um contacto mais
intimo com as acções decorrentes da análise de
um episódio avaliativo , no 2º tive a
oportunidade de analisar instrumentos que
potenciam a mudança de práticas pedagógicas,
atribuindo um caráter regulador às
aprendizagens (D., professor informática)
Avaliação autêntica
O feedback aos e-fólios foi uma orientação para
o nosso estudo e contribuiu para a auto-
avaliação (L, professor artes visuais).

Os e-fólios, apesar do tempo que tomavam, foram
muito importantes, porque permitiam-me lidar com
conteúdos muito importantes para a minha prática
de modo muito estimulante (I., XXX)
Transparência




Democratização    Envolvimento       Visibilidade       Impacto
participação na                                         efeito no
 definição dos    participação na     partilha de      processo de
  critérios de     definição das    processos e/ou   aprendizagem e
   avaliação,                          produtos      no desenho do
                     metas de
  objetivos e                                           programa
  avaliadores     aprendizagem                         educacional
Avaliação transparente
Fiquei com a clara ideia que é à luz da
definição dos critérios de avaliação (ao
alcance dos alunos desde o início do “jogo”)
que a minha prática letiva pode progredir no
sentido de uma tão grande transparência
quanto possível...é curioso como uma coisa
tão evidente (os alunos e os encarregados de
educação estarem familiarizados com os
critérios de avaliação) ser a exceção e não a
regra (J., professor de inglês)
Avaliação transparente
(...) a minha visão sobre a avaliação era
  bastante tradicional, era-me mais confortável
  encarar o processo avaliativo como
  “contabilístico” (...) para tal foi decisivo o
  contacto com os meus colegas nos fóruns que
  tinham a experiência de aplicação de
  portefólios que me ajudaram a perceber as
  vantagens deste recurso nas minhas aulas de
  língua materna (J., professor de língua materna)
Reflexões finais
 O efólio foi a ferramenta em relação à qual os
  participantes apresentaram as reações mais
  positivas, reconhecendo em particular o seu
  impacto na sua avaliação formativa os nos seus
  processos de regulação da aprendizagem

 Os comentários e rações positivas dos
  participantes em relação aos efólios, indiciam
  claramente o seu reconhecimento como uma
  actividade autêntica alinhada com as suas
  práticas profissionais
Gratos pela atenção


                     Luís Tinoca, ltinoca@ie.ul.pt
                  Isolina Oliveira, isolina@uab.pt

 Tinoca, L. & Oliveira, I (in press, 2013). Formative assessment of teachers in
the context of an online learning environment. In 'Formative assessments for
 teachers: issues about quality, design characteristics and impact on teacher
  learning’ eds. Dineke Tigelaar and Douwe Beijaard, Special Issue, Teachers
                   and Teaching: Theory and Practice. 19 (2).
Novos critérios particularmente
       relevantes na avaliação digital
• adequacy to online contexts

• the distinction between instruction-assessment alignment
  and competences-assessment alignment

• democratization

• engagement

• visibility

• sustainability

Afirse 2013 tinoca oliveira

  • 1.
    Estratégias de avaliação formativa num curso de formação de professores online Luís Tinoca1 & Isolina Oliveira2 1 Instituto de Educação, Universidade de Lisboa 2LE@D, Universidade Aberta
  • 2.
    Questões de investigação 1)De que modo as ferramentas previstas (atividades formativas e fóruns online) no modelo pedagógico contribuem para a regulação do processo de aprendizagem? 2) Como é que o e-fólio e o feedback associado contribuem para o desenvolvimento de competências dos professores?
  • 3.
    Um modelo pedagógicopara o ensino online (Pereira et al., 2007) Flexibilidade Apredizagem centrada no estudante Interação Inclusão Digital
  • 4.
  • 5.
    Elementos essenciais nomodelo pedagógico (1º ciclo) Plano de tutoria - Plano de Unidade Curricular (PUC) - Plano de Atividades Formativas - Cartão de Aprendizagem E-fólio – documento digital colocado online que constitua uma amostra esclarecedora de que o estudante desenvolveu uma dada competência
  • 6.
    Tipos de e-fólios Tarefa Definição Ensaio composição escrita, análise, reflexão Exercício prático aplicação, demonstração Construção de artefactos blogue, fotografia, poster, vídeo, slideshow,... Comentário crítico emitir opinião fundamentada Projeto desenhar um plano de ação Relatório de campo, de trabalho experimental Ficha de leitura leitura orientada sintetizando as principais ideias de um texto
  • 7.
    Qualidade da avaliaçãodigital (Pereira, Oliveira e Tinoca, 2010) autenticidade praticabilidade consistência transparência
  • 8.
    Contexto Curso de Profissionalizaçãoem Serviço 2 cadeiras (entre 7): Prácticas e TIC; Modelos de Avaliação Pedagógica 630 professores, com um mínimo de 5 anos de experiência 2 tipos de avaliação: E-folio (online) P-folio (f2f)
  • 9.
    Metodologia Design-Based Research (Bereiter, 2002;Anderson, 2005) Questionário online (n=494) Reflexões críticas
  • 10.
    Categorias de análise Categorias Definições Alfa Cronbach Temas (4 itens) Conteúdos estudados em cada curso .810 Recursos de Recursos de aprendizagem digitais (livros, .757 aprendizagem (4 itens) artigos, wiki, vídeos, blogues, ...) Atividades formativas Tarefas apresentadas pelo professor ou .828 (3 itens) tutor incluindo orientações de respostas Interações nos fóruns Discussões nos fóruns online .805 online (4 itens) E-fólios (4 itens) Pequeno documento digital elaboardo pelo .891 estudante e publicado online Feedback (3 itens) Informação dada aos estudantes sobre o e-fólio .894 no sentido de melhorar a sua aprendizagem e prática Transparência (3 itens) Práticas de avaliação adequadas e justas .844 Processos regulatórios Análise e reflexão visando a melhoria da sua .862 (4 itens) própria aprendizagem e prática
  • 11.
    Resultados Dimensões Média (%) DP (%) Temas 74 14 Recursos de aprendizagem 74 13 Atividades formativas 73 16 Interacções nos fóruns online 64 14 E-fólios 83 15 Feedback 71 18 Transparência 72 15 Processos regulatórios 73 14
  • 12.
    Autenticidade Similitude Complexidade Adequação Significância competências desafio condições valor para necessárias à cognitivo estudantes, de vida real/ professores e realização empregadores profissional adequadas
  • 13.
    Avaliação autêntica Gostaria dedestacar a importância que a realização dos e-fólios tiveram na aprendizagem que desenvolvi: se o 1º foi importante na medida em que me proporcionou um contacto mais intimo com as acções decorrentes da análise de um episódio avaliativo , no 2º tive a oportunidade de analisar instrumentos que potenciam a mudança de práticas pedagógicas, atribuindo um caráter regulador às aprendizagens (D., professor informática)
  • 14.
    Avaliação autêntica O feedbackaos e-fólios foi uma orientação para o nosso estudo e contribuiu para a auto- avaliação (L, professor artes visuais). Os e-fólios, apesar do tempo que tomavam, foram muito importantes, porque permitiam-me lidar com conteúdos muito importantes para a minha prática de modo muito estimulante (I., XXX)
  • 15.
    Transparência Democratização Envolvimento Visibilidade Impacto participação na efeito no definição dos participação na partilha de processo de critérios de definição das processos e/ou aprendizagem e avaliação, produtos no desenho do metas de objetivos e programa avaliadores aprendizagem educacional
  • 16.
    Avaliação transparente Fiquei coma clara ideia que é à luz da definição dos critérios de avaliação (ao alcance dos alunos desde o início do “jogo”) que a minha prática letiva pode progredir no sentido de uma tão grande transparência quanto possível...é curioso como uma coisa tão evidente (os alunos e os encarregados de educação estarem familiarizados com os critérios de avaliação) ser a exceção e não a regra (J., professor de inglês)
  • 17.
    Avaliação transparente (...) aminha visão sobre a avaliação era bastante tradicional, era-me mais confortável encarar o processo avaliativo como “contabilístico” (...) para tal foi decisivo o contacto com os meus colegas nos fóruns que tinham a experiência de aplicação de portefólios que me ajudaram a perceber as vantagens deste recurso nas minhas aulas de língua materna (J., professor de língua materna)
  • 18.
    Reflexões finais  Oefólio foi a ferramenta em relação à qual os participantes apresentaram as reações mais positivas, reconhecendo em particular o seu impacto na sua avaliação formativa os nos seus processos de regulação da aprendizagem  Os comentários e rações positivas dos participantes em relação aos efólios, indiciam claramente o seu reconhecimento como uma actividade autêntica alinhada com as suas práticas profissionais
  • 19.
    Gratos pela atenção Luís Tinoca, ltinoca@ie.ul.pt Isolina Oliveira, isolina@uab.pt Tinoca, L. & Oliveira, I (in press, 2013). Formative assessment of teachers in the context of an online learning environment. In 'Formative assessments for teachers: issues about quality, design characteristics and impact on teacher learning’ eds. Dineke Tigelaar and Douwe Beijaard, Special Issue, Teachers and Teaching: Theory and Practice. 19 (2).
  • 20.
    Novos critérios particularmente relevantes na avaliação digital • adequacy to online contexts • the distinction between instruction-assessment alignment and competences-assessment alignment • democratization • engagement • visibility • sustainability