O documento discute a avaliação do direito à educação no Brasil por meio de testes padronizados como a Prova Brasil. Ele aborda como os resultados podem ser usados para identificar desigualdades educacionais e melhorar o aprendizado dos alunos, focando nos níveis de proficiência e nas causas para desempenhos abaixo do esperado.

1. APROVA BRASIL Amaury Patrick Gremaud Goiânia, 27.04.2010

2. Pressuposto Direito à educação = direito a aprender Se não há aprendizado, não há atendimento aos direitos educacionais dos alunos

3. Sujeitos Este direito é um direito de todos e de cada um de nós Para se verificar se este direito está sendo atendido – necessário conhecer quem são os sujeitos deste direito Os censos demográfico e escolar deveriam identificar TODOS e CADA UM dos brasileiros: sujeitos do direito à educação.

4. Como verificar? Há vagas para todos ? Censos Há recursos suficientes ? Dados de orçamento. Há funcionamento regular ? Dados Escolares: faltas, alocação alunos, material didático, clima escolar. Há aprendizado ? Prova Brasil

5. Aprender o que? Leitura e Matemática competências fundamentais para o desenvolvimento de todas as outras Mas: objetivos da escola vão além disto ... Ética, convívio dos diferenças, autonomia Necessário reconhecer os limites da análise, o que não quer dizer que se deva descartá-la

6. Padrão Único O sistema educacional brasileiro é analisado usando testes padronizados e uma métrica comum a todos os alunos. Art. 210. da Constituição: Serão fixados conteúdos mínimos para o ensino fundamental, de maneira a assegurar formação básica comum e respeito aos valores culturais e artísticos, nacionais e regionais. É sobre esse núcleo comum que a Prova Brasil é organizada.

7. Expectativas e diferenças Expectativas de aprendizagem (dentro deste núcleo comum - mínimo) são as mesmas para todos mesmo que existam dificuldades diferentes para cada um dos alunos e estas conduzam a formas diferentes de organização do ensino Prova Brasil – exames padronizados Padronização tem um sentido importante que reflete a expressão da cidadania comum a todos

8. SAEB - MATRIZ DE REFERÊNCIA Os conteúdos são subdivididos descritores que estão associados às habilidades a serem desenvolvidas em cada série e disciplina. Cada descritor dá origem a diferentes itens; A matriz é o documento que orienta a elaboração dos itens (questões) que compõe os testes do SAEB e da Prova Brasil

9. MATRIZ DE REFERÊNCIA

10. MATRIZ DE REFERÊNCIA

11. BIB - MONTAGEM DOS TESTES PROVA BRASIL 11 itens (4ª série) = 77 itens 13 itens (8ª série) = 91 itens 7 blocos Todos os alunos fazem as 2 provas LP e M 4ª série – 22 itens de Port e 22 de Mat. 8ª série – 26 itens de Port e 26 de Mat Caderno de Teste Prova Brasil = 21 testes diferentes 1 2 3 … 11 1 2 3 … 11 1 2 3 … 10 1 2 3 … 11 1 2 3 … 11 1 2 3 … 11 1 2 3 … 11 1 2 3 … 11 1 2 3 … 11

12. RESULTADOS – ESCALA DE PROFICIÊNCIA A Escala: ferramenta utilizada para sistematizar informações. Cada escala é comum às séries avaliadas e cumulativas.

13. RESULTADOS – ESCALA DE PROFICIÊNCIA LÍNGUA PORTUGUESA - LEITURA 8ª série 3ª séri3 EM

14. PROVA BRASIL – Escala de Língua Portuguesa Nível Descrição dos Níveis da Escala 125 A partir de textos curtos, como contos infantis, histórias em quadrinhos e convites, os alunos da 4 a e da 8 a séries: localizam informações explícitas que completam literalmente o enunciado da questão; inferem informações implícitas; reconhecem elementos como o personagem principal; interpretam o texto com auxílio de elementos não‑verbais; identificam a finalidade do texto; estabelecem relação de causa e conseqüência, em textos verbais e não­ verbais; e conhecem expressões próprias da linguagem coloquial. 150 Além das habilidades anteriormente citadas, neste nível, os alunos da 4 a e da 8 a séries: localizam informações explícitas em textos narrativos mais longos, em textos poéticos, informativos e em anúncio de classificados; localizam informações explícitas em situações mais complexas, por exemplo, requerendo a seleção e a comparação de dados do texto; inferem o sentido de palavra em texto poético (cantiga popular); inferem informações, identificando o comportamento e os traços de personalidade de uma determinada personagem a partir de texto do gênero conto de média extensão, de texto não‑verbal ou expositivo curto; identificam o tema de um texto expositivo longo e de um texto informativo simples; identificam o conflito gerador de um conto de média extensão; identificam marcas lingüísticas que evidenciam os elementos que compõem uma narrativa (conto de longa extensão); e interpretam textos com material gráfico diverso e com auxílio de elementos não­ verbais em histórias em quadrinhos, tirinhas e poemas, identificando características e ações dos personagens.

15. OS NÍVEIS DAS ESCALAS Possuem complexidades crescentes dadas: pelo “conteúdo” do conhecimento avaliado pela operação mental requerida por fatores como a construção do enunciado ou a tipologia textual.

16. ALGUMAS CONSIDERAÇÕES Cada nível acumula as habilidades nele descritas e as constantes nos níveis anteriores; conseqüentemente, o final das escalas são compostos pelas mais altas habilidades avaliadas. Pela localização numérica do desempenho na escala, é possível saber quais habilidades os alunos já construíram, quais estão desenvolvendo e aquelas a serem alcançadas Pela complexidade das habilidades já construídas pelos alunos, é possível pressupor que tenham desenvolvido habilidades mais simples, ainda que não tenham sido apresentadas a eles nas provas

17. QUESTIONAMENTOS 1 – Espera-se que os alunos da 4ª série atinjam os níveis finais das escalas? 2 – Quais são os níveis de desempenho que meus alunos devem atingir em cada série e disciplina?

18. Apresentação dos Resultados Como sintetizar os resultados de forma útil ? Interpretação Normativa e Pedagógica. Os níveis de aprendizado como proposta de solução.

19. Níveis de Desempenho Abaixo do Básico (Insuficiente) Básico Adequado (Proficiente) Avançado

20. Pontos de Corte

21. Resultados Município Hipotético Níveis de Aprendizado Quarta Oitava META Leitura Matemática Leitura Matemática Insuficiente 38,1 48,3 39,4 53,8 5,0 Básico 44,1 39,0 51,3 41,4 25,0 Proficiente 16,0 11,6 8,1 3,7 45,0 Avançado 1,8 1,1 1,2 1,1 25,0

22. Importância dos Níveis ESCOLA PROFICIÊNCIA MÉDIA NÍVEL (%) INSUFICIENTE BÁSICO PROFICIENTE AVANÇADO 1 199.90 9.1 45.5 45.5 0.0 2 199.28 18.8 30.4 39.1 11.6 3 199.26 16.7 32.3 35.4 15.6 4 200.04 4.3 48.6 37.1 10.0 5 200.39 2.9 44.1 47.1 5.9 6 200.64 13.3 30.0 38.9 17.8 7 199.62 9.4 34.4 40.6 15.6

23. Interpretação Pedagógica– Abaixo do Básico Compreender as relações de causa e conseqüência entre idéias em uma tirinha. Compreender, em uma tirinha o sentido de uma palavra. Recuperar informações explícitas, com auxílio de imagens, em cartazes. Localizar informação implícita no texto em um bilhete eletrônico.

24. Interpretação Pedagógica – Básico Selecionar legenda apropriada para uma foto de revista. Localizar informação explícita em um texto narrativo simples. Identificar o tema ou assunto principal do texto. Recuperar a informação explícita do texto. Identificar personagem de uma narrativa literária simples. Identificar o efeito de sentido produzido em um texto pelo uso intencional de recursos expressivos gráfico-visuais.

25. Interpretação Pedagógica – Adequado Recuperar informação do texto, localizando o locutor e o interlocutor por marcas lingüísticas. Localizar e organizar, na seqüência em que aparecem, itens de informação explícita, distribuídos ao longo de um texto. Interpretar o efeito de sentido que provoca o humor. Estabelecer relações lógico-semânticas entre partes do texto que dão coesão às idéias.

26. Interpretação Pedagógica – Avançado Inferir o assunto principal de um texto, com base em informações contidas em título, subtítulo ou corpo do texto. Identificar os possíveis elementos constitutivos da organização interna de um bilhete pessoal. Identificar marcas de variação lingüística de natureza social ou geográfica, no léxico de um texto literário narrativo. Identificar o efeito de sentido produzido em um texto literário pelo uso intencional de pontuação expressiva (interrogação, exclamação, reticências etc.).

27. Indicadores Gerenciais IDEB Outras Alternativas

28. O IDEB Indicador sintético que combina informações de: desempenho - N (proficiência média dos alunos na Prova Brasil / SAEB) rendimento escolar - P (taxa média de aprovação na etapa de ensino) - inverso do tempo para fazer série

29. Gráfico ilustrativo da projeção do IDEB IDEB2005 IDEB2021 Tempo Esforço necessário

30. Redução da desigualdade

31. Indicador Gerencial Níveis Escore Excluídos – (Ex) 0 Insuficiente – (In) 2 Básico – (Ba) 6 Adequado – (Ad) 8 Avançado – (Av) 10

32. Indicador Gerencial de Desempenho Excluídos (0) Insuficiente (2) Básico (6) Adequado (8) Avançado (10) IRE Meta 5% 5% 20% 45% 25% 7,5 Pior 100% 0 0 0 0 0 Melhor 0 0 0 0 100% 10

33. Nível Socioeconômico Síntese de Indicadores de Renda, Educação, Ocupação. O questionário contextual da Prova Brasil 2007 permite seu cálculo.

34. Prova Brasil Leitura – Quarta Série agrupamento AB BA AD AV Média NSE 1 19,40% 46,90% 28,30% 5,40% 184,5 2 2 22,40% 46,50% 26,70% 4,50% 180,8 3 3 26,10% 41,30% 26,40% 6,20% 180,1 3 4 26,50% 41,90% 25,30% 6,30% 179,7 1 5 23,10% 46,90% 25,80% 4,20% 179,5 3 6 24,60% 47,10% 24,20% 4,00% 177,9 1,5

35. Uso dos resultados Compreensão dos resultados: estudo detalhado das planilhas de resultados nas avaliações. Identificar o que fazer, pedagogicamente, para tirar os alunos dos níveis mais baixos e colocá-los nos níveis de desempenho mais altos. Buscar causas objetivas e não genéricas para os problemas.

36. Uso dos resultados Identidade da escola: quem atende, onde está situada, alguma história, as profissões dos pais dos alunos. Registro dos investimentos realizados na escola: Infra-estrutura, rotinas administrativas etc. Explicitar o que é ainda necessário. Estabelecimento de metas e mudanças necessárias para os anos futuros.

37. Explicações Analises de fatores associados: Efeito escola x Família (sócio-econômico) – existe importante espaço para trabalhos dos gestores Recursos Organização/gestão Clima acadêmico/ênfase pedagógica Salário/formação Pesquisas qualitativas

38. Estruturas Escolares Pessoas Projeto Pedagógico Professores e Funcionários Alunos Aprendizado dos Alunos CULTURA DA ESCOLA Pais e Sociedade Processos: Ensino Administrativos Rotina escolar Recursos e Parcerias Liderança GESTÃO DA ESCOLA

39. Simulação do Efeito Escola para Todas as Escolas – Estado de São Paulo

40. Explicações Analises de fatores associados: Efeito escola x Família (sócio-econômico) – existe importante espaço para trabalhos dos gestores Recursos Organização/gestão Clima acadêmico/ênfase pedagógica Salário/formação Pesquisas qualitativas

41. Visão compartilhada sobre as metas da escola Aprendizagem como foco central da escola Ênfase no desempenho Aprendizagem voltada para a trajetória Ênfase no equilíbrio entre desempenho e participação social Aprendizagem situada na vida social Preocupação com a apropriação de conteúdos, competências e habilidades Senso elevado de responsabilidade profissional Normas de convivência claras, aceitas e incorporadas Otimização do tempo escolar Expectativas positivas Ambiente produtivo Autonomia e proatividade da equipe escolar eficácia escolar Relações interpessoais positivas