O documento aborda o Programa Internacional de Avaliação de Estudantes (PISA), que avalia estudantes de 15 anos em leitura, matemática e ciências a cada três anos, e discute a qualidade educacional nos países participantes. O Brasil apresentou avanços em comparação com edições anteriores, mas ainda enfrenta desafios para atingir a média dos países ricos da OCDE, com metas estabelecidas para 2030. A avaliação foca na aplicação de conhecimentos em situações práticas e nas variáveis socioeconômicas que impactam o desempenho dos alunos.

1. 
Universidade Luterana do Brasil
Programa de Pós Graduação em Ensino de Ciências e Matemática
Currículo: Concepções e Práticas
Pedagógicas em Ciências e Matemática
Prof. Dra. Cláudia L. Oliveira Groenwald
Maio/2014
Ednei Becher
Marcos Reis
Gerry Sanchez
Roberta Dall Agnese
Suelen Nobre

2. PISA

3. Introdução
Programa Internacional de Avaliação de Estudantes:
 é uma iniciativa internacional de AVALIAÇÃO
COMPARADA;
 estudantes na faixa dos 15 anos;
 desenvolvido e coordenado pela Organização para
Cooperação e Desenvolvimento Econômico (OCDE);
 Brasil: Instituto Nacional de Estudos e Pesquisas
Educacionais Anísio Teixeira (INEP).

4. Introdução
Organização das provas:
 Os testes do PISA (leitura, matemática e ciências)
estão organizados em termos de competências gerais;
 O PISA não testa o domínio de algum currículo em
específico.
aplicar os conhecimentos e habilidades
que aprenderam na escola para os
desafios da vida real

5. Áreas do conhecimento
Leitura Matemática Ciências
As avaliações do Pisa acontecem a cada três anos e
abrangem três áreas do conhecimento:

6. Histórico - Surgimento
 Demanda dos países membros OCDE para dados
regulares e confiáveis sobre:
 A OCDE começou a trabalhar no PISA, em meados da
década de 1990;
 Lançado oficialmente em 1997;
 1ª. primeira pesquisa em 2000.
CONHECIMENTOS E
HABILIDADES DOS ALUNOS
DESEMPENHO DOS
SISTEMAS DE ENSINO

7. 2000 2003 2006 2009 2012 2015
43 41 58 68 65 75
Histórico - Ênfases
 Cada edição do programa confere ênfase a uma área
específica:

8. Histórico – Financiamento e Participação
 Contribuições diretas das autoridades governamentais – Ministérios da
Educação.
 Países interessados em participar devem entrar em contato com a
secretaria da OCDE;
 Conselho Diretor do PISA aprova a adesão de acordo com determinados
critérios;
 Os participantes devem ter o conhecimento técnico necessário para
administrar uma avaliação internacional e deve ser capaz de cumprir a
totalidade dos custos de participação;
 Para participar de um ciclo do PISA, os participantes devem juntar-se dois
anos antes da pesquisa ocorre. Por exemplo, o PISA 2012 participantes
juntaram-se antes de Março de 2010.

9. Histórico - Singularidade
 Abrangência e regularidade;
 70 países participantes;
 Permite acompanhar o
desenvolvimento das
principais metas de Educação;
 Avalia no final do período de
escolarização obrigatória.

10. Histórico – Desempenho Brasileiro
O Brasil avançou na média das três áreas em 9,2% no comparativo com o Pisa 2000, porém
estacionou em relação ao Pisa 2009 em Leitura e Ciências, e incrementou 1,3% em
Matemática. Com esse resultado, a meta estabelecida pelo governo brasileiro de se igualar à
média dos países ricos (da OCDE) – prevista para 2022 – se estende para 2030.
2000
- 43 países;
- Brasil em
último.
2012
- 65 países;
- Brasil:
• 57º. M;
• 54º. C;
• 58º. L.
56% dos estudantes
tiveram um
desempenho de
“quase analfabetos
funcionais”
México: 44%
atrás do Chile, Uruguai,
México, Turquia, Cazaquistão,
Costa Rica, Emirados Árabes

11. Objetivos
 Discussão da qualidade da educação ministrada nos
países participantes.
 O Programa centra-se no conceito de “LITERACIA” que, de
acordo com os seus responsáveis, consiste em os alunos
aplicarem o conhecimento e as suas capacidades em ÁREAS
CHAVE, em analisarem, raciocinarem e comunicarem, eficaz
e efetivamente, e em resolverem e interpretarem problemas,
numa variedade de situações da VIDA REAL.

12. Objetivos
 Comparações internacionais dos países participantes
 O PISA possibilita avaliar a QUALIDADE DAS APRENDIZAGENS,
em termos comparativos, pondo em relação os desempenhos
dos vários sistemas educativos.
 Entre seus objetivos são AVALIAR HABILIDADES de leituras
necessárias em situações da vida real.
 Privilegiar o TEXTO INFORMATIVO e esquemas cognitivos de
leitura.

13. Objetivos
 Subsidiar políticas de melhoria da educação
 O MEC estabeleceu metas de melhorias no Pisa. Até 2021, o objetivo
é atingir 473 PONTOS, média dos países-membros da OCDE
atualmente.
 O Brasil vem aumentando gradativamente os investimentos no setor:
 Passou de 4,7% do Produto Interno Bruto (PIB) em 2000 para 6,1%
em 2011.
 Pelo Plano Nacional de Educação (PNE), esse percentual deve chegar
a 10% em 2020.

14. Objetivos
 Relacionar o desempenho dos alunos a variáveis
demográficas, socioeconômicas e educacionais.
 O perfil sócio econômico e cultural dos alunos é fator
substancialmente determinante na distribuição por entre os
níveis de proficiência.
 Os resultados do PISA, indicam:
Alunos de status Sócio Econômico Muito Baixo Alunos de status Sócio Econômico Alto
38,3% dos alunos encontram-se no NÍVEL 0 e a
presença desses alunos nos níveis mais altos da
escala é praticamente nula, apenas 0,6%
conseguem atingir o NÍVEL 4 da escala.
32,2% dos alunos alocam-se no NÍVEL
2 da escala.

15. Objetivos:
DEMOGRÁFICAS SOCIOECONÔMICAS EDUCACIONAIS
5. Relacionar o DESEMPENHO dos alunos de acordo com as
variáveis:
1. Produzir indicadores do DESEMPENHO ESTUDANTIL, em todos
os países envolvidos;
2. Comparar os PAÍSES participantes;
3. Discutir sobre a QUALIDADE da EDUCAÇÃO ministrada nos
países participantes;
4. Subsidiar POLÍTICAS de melhoria da Educação.

16. Competências
O Pisa procura verificar a operacionalização de
esquemas cognitivos em termos de:
1º conteúdos ou estruturas do conhecimento que os
alunos precisam adquirir em cada área
2º competências para aplicação desses conhecimentos
3º contextos em que conhecimentos e competências
são aplicados.

17. Competências (Leitura)
Para avaliar o letramento em Leitura, os alunos
são levados a realizar uma ampla gama de
tarefas:
1º Com diferentes tipos de textos, abrangendo desde a
recuperação de informações específicas até a demonstração
de compreensão geral;
2º Interpretação de texto e reflexão sobre seu conteúdo;
3º Os textos utilizados incluem: passagens em prosa ou verso,
listas, formulários, tabelas, gráficos e diagramas.

18. Competências (Leitura)
Localizar
informações
Interpretar
textos
Avaliar
textos
Refletir
sobre textos

19. Competências (Matemática)
A avaliação do letramento matemático
demanda o uso de competências matemáticas
em vários níveis:
1º Realização de operações básicas;
2º Raciocínio e as descobertas matemáticas;
3º Conhecimento e a aplicação de conteúdos de áreas como:
estimativa, mudança e crescimento, espaço e forma,
raciocínio quantitativo, incerteza, dependências e relações.

20. Competências (Matemática)
Raciocínio
quantitativo
Relações
quantitativas
ReflexãoConexões
Reprodução

21. Competências (Ciências)
Já o letramento científico envolve o uso de
conceitos científicos necessários para:
1º Compreender e ajudar a tomar decisões sobre o mundo
natural;
2º Capacidade de reconhecer e explicar questões
científicas;
3º Fazer uso de evidências científicas;
4º Tirar conclusões com base científica e comunicar essas
conclusões.

22. Competências (Ciências)
Saúde
Meio
Ambiente
Tecnologia
Fenômenos
naturais
Recursos
Naturais

23. Como é avaliado?
Os instrumentos de avaliação PISA 2000:
PISA 2000 foi cuidadosamente desenhado por uma rede internacional de instituições
líderes e especialistas. Onde, cada aluno participou, em seu/sua própria escola, em uma
sessão de avaliação escrita de duas horas e passou cerca de meia hora respondendo a
um questionário sobre si mesmo.
Diretores de escola foram convidados para dar mais informações sobre as características
da escola em outro questionário de 30 minutos.
As avaliações do PISA 2000 foi de modo impresso. Os alunos eram obrigados a considerar
passagens escritas e diagramas, e para responder a uma série de perguntas pessoais.
Grande parte do material foi projetado para determinar se os alunos pudessem refletir e
pensar ativamente sobre o domínio.

24. Como é avaliado?
Os instrumentos de avaliação PISA 2000:
Cada aluno foi avaliado por duas horas, mas nem todos os estudantes foram dadas as
mesmas tarefas de avaliação. Diferentes combinações de tarefas foram agrupadas em
nove livretos de avaliação diferentes.
No total, a avaliação do PISA 2000 foi baseado em 141 tarefas de alfabetização em leitura,
32 tarefas de alfabetização matemática e 35 tarefas de alfabetização científica.
Formato das perguntas do teste
• Quarenta e cinco por cento das tarefas necessárias aos alunos para construir suas
próprias respostas;
• Outros 45 por cento das tarefas foram feitas em formato de múltipla escolha;
• Os restantes 10 por cento das tarefas necessárias aos alunos constroem a resposta
dentre uma gama limitada de respostas aceitáveis.

25. Alguns exemplos de questões
EXEMPLO:
Use as informações sobre o Lago
Chade na página ao lado para
responder às perguntas abaixo.
Pergunta 1: O Lago Chade (K040Q02)
Leitura tarefa: Recuperando
informações
Formato do Texto: Não-contínuo
Situação: Público
Qual é a profundidade do lago Chade
hoje?
A) Cerca de dois metros.
B) Cerca de quinze metros.
C) Cerca de cinquenta metros.
D) Ele desapareceu completamente.
E) A informação não é fornecida.
Pontuação - Questão 1
Pontuação 1: Resposta A - cerca de
dois metros.
Pontuação 0: Outras respostas.
Disponível em:
<http://www.keepeek.com/Digital-
Asset-
Management/oecd/education/sampl
e-tasks-from-the-pisa-2000-
assessment_9789264194274-
en#page1>. Acessado em
14/03/2014.

26. Alguns exemplos de questões
Pergunta 2: O Lago Chade (R040Q03A)
Leitura tarefa: Recuperação de informações
O formato de texto: Não-contínuo
Situação: Público
Em cerca de que ano é que o gráfico da Figura A começa?
Pontuação - Questão 2
Score 1: Respostas que estado 11000 BC (ou uma aproximação entre 10500 e 12000), indicando que o aluno tenha
extrapolado a partir da escala). Por exemplo:
• 11000.
• 11000 AD.
• 10500 AD.
• Pouco antes de 10.000 AD.
• Cerca de 12 mil.
• Cerca de 11.000 AD.
Pontuação 0: Outras respostas, incluindo a seta apontando para o ponto do gráfico de partida. Por exemplo:
• 10000 BC. [Não conseguiu extrapolar a partir da escala.]
• 20000 AD.
• 8000 AD. [Olhou para a figura errada.]
• 11000BC 4000 AD. [Ignorar resposta cruzado.]
• 0.

27. Alguns exemplos de questões
Questão 1: Explorando um texto não
contínuo.
Composto de pequenos blocos de informação,
ele testa a capacidade de estabelecer relações
entre as diferentes partes
Comentários
1. Lide
No jargão jornalístico, é a abertura de texto, que
apresenta brevemente o assunto da reportagem.
Saber isso facilita na hora de identificar a ideia
principal.
2. Ilustração
3. Gráfico
4. Legenda
5. Mapa

28. Alguns exemplos de questões
Vijaypat Singhania utilizou tecnologias encontradas em dois outros meios de transporte. Quais
são esses meios de transporte?
1. Avião 2. Nave espacial.
Competência Acessar e recuperar informações
Proficiência Nível 4
Análise: A competência envolvida é relativamente simples - o que torna o nível mais difícil é o formato
do texto, que exige localizar e organizar diversos pedaços de informação para encontrar o que se pede. No
caso, as duas informações estão na legenda. Uma delas (avião) aparece explicitamente, mas a segunda (nave
espacial) requer uma pequena inferência para que o aluno identifique que macacão espacial está ligado a
espaçonaves.
Pisa 2009: análise de 3 questões de leitura. Nova Escola. Disponível em: <http://revistaescola.abril.com.br/planejamento-e-
avaliacao/avaliacao/pisa-2009-analise-3-questoes-leitura-621963.shtml>. Acessado em 14/03/2014.

29. Alguns exemplos de questões
OECD, Better Policies for Better Lives.
Programmer for International Student
Assessment (PISA). Disponível em:
<http://www.oecd.org/pisa/test/>. Acessado em
14/03/2014.

30. Alguns exemplos de questões

31. Tendências para 2015
 PISA 2015 marcará um passo significativo neste desenvolvimento,
com a maioria dos países de se mudar para uma plataforma de
avaliação totalmente baseado em computador.
 Por último, a rápida expansão do acesso à internet vai torná-la
relevante para explorar e considerar o papel da internet no PISA.
 O TALIS foi estabelecido para fornecer uma perspectiva mais ampla de
professores sobre questões relacionadas com a profissão docente.
Sinergias entre PISA e TALIS pode melhorar a qualidade dos dados e
produzir mais e melhor compreensão das políticas de ambos os
estudos.

32. Resultados e comparativos
Observa-se que os
estudantes avaliados em
2012 estavam mais
avançados nos anos de
estudo do que aqueles
avaliados em 2003 – uma
tendência que já podia ser
observada nas edições de
2006 e 2009, e que indica
que o Brasil vem
conseguindo melhores
resultados na promoção
de seus estudantes. (Brasil,
2013, p.13)

33. Resultados e comparativos
• O ciclo de matemática do PISA 2012 deve ser comparado com o ciclo de
2003, que também foi de matemática.
• No conjunto dos países selecionados, observa-se que o Brasil foi o que mais
avançou em pontos.
• Ao contrário da média dos estudantes da OCDE, que vem apenas oscilando
ao longo das edições do PISA, o Brasil vem demonstrando avanços nos
resultados da avaliação. (Brasil, 2013, p.14)

34. Resultados e comparativos
Além da evolução dos
pontos observável no
período, outro aspecto
é a evolução dos níveis
de proficiência em
cada uma das áreas.

35. Resultados e comparativos
• Na edição 2012 o estado de Santa Catarina foi o melhor estado brasileiro em
Matemática e Ciências enquanto o Rio Grande do Sul foi o melhor em Leitura.
• A análise das diversas redes públicas destaca a rede federal com a melhor média.
Todavia, essa rede é muito reduzida, representando apenas 1,2% dos estudantes,
uma parcela com nível socioeconômico mais alto do que a população das redes
municipais e estaduais. Abaixo temos a tabela com os dados de Matemática.
(Brasil, 2013, p.54)

36. Resultados e comparativos
Para observar o Brasil em uma relação
internacional, foram selecionados os
países latino-americanos vizinhos –
Argentina, Chile, Colômbia, México, Peru,
e Uruguai; Portugal e Espanha, por sua
uma proximidade cultural; Estados Unidos
que, tal como o Brasil, é uma federação de
dimensões continentais; e dois países que
reconhecidamente apresentam bons
sistemas educacionais, sendo um europeu
– Finlândia – e outro, asiático – Coréia do
Sul. No caso brasileiro, passa de 60% a
proporção dos estudantes que não
atingiram o Nível 2 considerado o nível
necessário para que o estudante possa
exercer plenamente sua cidadania. (Brasil,
2013, p.20)

37. Comparativos e resultados
Número da classe por país
O Brasil possui um número razoável
de estudantes por turma, e em alguns
países com melhor desempenho esse
número é reduzido. Todavia, esta é
uma variável cuja análise merece
ponderação. (Brasil, 2013, p.60)
Quando comparado a outros países,
o nível de autonomia escolar é baixo
no Brasil, mas situa-se próximo ao de
outros vizinhos sul-americanos.

38. Resultados e comparativos
Os modelos e os dados dos questionários socio-econômicos-educacionais
preenchidos pelos estudantes, os dados dos questionários preenchidos pelos pais
e pelos diretores das escolas integrantes da amostra estão disponíveis para
download, no formato para os softwares estatísticos SAS ou SPSS.
http://pisa2012.acer.edu.au
Neste mesmo sitio também é possível fazer
consultas diretamente a base de dados.

39. Referências
Programme for Intenational Sdudent Assessment (PISA). Disponível em:
http://www.oecd.org/pisa/aboutpisa/pisafaq.htm. Acessado em: 04 de Abril de
2014.BEYOND PISA 2015: A LONGER-TERM STRATEGY OF PISA. Disponível em:
<http://www.oecd.org/pisa/pisaproducts/Longer-term-strategy-of-PISA.pdf>.
Acessado em 13 de Março de 2014.
BRASIL. Relatório Nacional PISA 2012 – Resultados brasileiros. Fundação
Santillana.
São Paulo: 2013.
PISA 2000. Disponível em: <http://www.keepeek.com/Digital-Asset-
Management/oecd/education/sample-tasks-from-the-pisa-2000-
assessment_9789264194274-en#page1>. Acessado em 14/03/2014.
PISA 2009: análise de 3 questões de leitura. Nova Escola. Disponível em:
<http://revistaescola.abril.com.br/planejamento-e-avaliacao/avaliacao/pisa-
2009-analise-3-questoes-leitura-621963.shtml>. Acessado em 14/03/2014.