Avaliao Diagnstica

Programa Brasil Alfabetizado

Diretoria de Polticas de Educao de Jovens e Adultos

Ministrio da Educao do Brasil
Santiago de Chile
Dezembro de 2008

Programa Brasil Alfabetizado

Criao do Programa;

Finalidade;

Funcionamento;

Caractersticas do pblico atendido;

Abrangncia do Programa.

Plano de Avaliao do Programa Brasil

Alfabetizado


Sistema de avaliaes para o Programa Brasil Alfabetizado

instituido em 2004.

Este sistema objetiva:

a) Subsidiar os gestores do Programa;
b) Adequar o Programa realidade de sua execuo;
c) Melhorar a eficincia e efetividade.

Inicialmente, foram propostas avaliaes:

a) Ex-ante
b) Ex-post

Plano de Avaliao do Programa Brasil

Alfabetizado

Foram utilizadas 36 avaliaes agregadas em 18 funes.

Estas foram distribudas em quatro macrofunes, a saber:
a) Mobilizao de recursos;
b) Eficincia no uso dos recursos;
c) Eficcia das aes realizadas;
d) Seleo adequada dos beneficirios.

Foi elaborada uma amostra de alfabetizandos, de

alfabetizadores e de turmas para aplicao de questionrios
scio-econmico, de gesto e o Teste Cognitivo, alm do
prprio entrevistador responder a um roteiro para observaes.

Avaliao Diagnstica do Programa

Brasil Alfabetizado
A Avaliao Diagnstica do Programa Brasil Alfabetizado
composta de quatro eixos de aes:
a) Avaliao Cognitiva Amostral;
b) Avaliao Cognitiva Universal;
c) Aplicao do INAF;
d) Interao com a Provinha Brasil.

Avaliaes Cognitivas Amostral

e Universal

As Avaliaes Cognitivas tm por finalidade revelar quais as

competncias e habilidades que os alunos possuem em leitura,
escrita e matemtica.

Eixos de avaliao cognitiva integrados:

a) Avaliao Amostral;
b) Avaliao universal;

As avaliaes possuem a mesma matriz de referncia cognitiva e

banco de itens comum.
Elas se diferenciam nos mtodos de aplicao, de correo e
nos objetivos.

Avaliao amostral
A avaliao amostral permite:

O acompanhamento do processo de alfabetizao e aferio

de resultados;

A construo de uma escala de nveis de aprendizagem que

traz subsdios para a equipe pedaggica do programa;

Com custos relativamente baixos, fornecer um retrato da

situao da populao avaliada.

Avaliao Universal
Avaliao Universal visa:


Fornecer instrumental de avaliao diagnstica para as

Secretarias Estaduais e Municipais de Educao;

Permitir que as instituies parceiras encaminhem para a

Educao de Jovens e Adultos aqueles alunos que j dominem
determinadas competncias e habilidades;

Permitir que os alfabetizadores planejem as atividades de sala

de aula de acordo com as especificidades de cada
alfabetizando.

Histrico da Avaliao Cognitiva

Amostral
Ano 2003
 Teste de Aplicao individual;
 Pr-teste com 200 alfabetizandos;
Ano 2004
 Teste de aplicao coletiva;
 Pr-teste com 600 alfabetizandos;
Ano 2005
 Teste de aplicao coletiva no mbito do PBA;
 Aplicao de testes de entrada e sada com os mesmos
alfabetizandos;
 1400 aplicaes (entrada e sada).

Histrico da Avaliao Cognitiva

Amostral
Anos 2006 e 2007


Teste de aplicao coletiva;

Aplicao no mbito do Plano de Avaliao do Programa

Brasil Alfabetizado;

Aplicao de testes de entrada e sada com os mesmos

alfabetizandos;

4.000 aplicaes (entrada e sada).

INAF ndice de Alfabetismo

Funcional

O INAF Indicador de Alfabetismo Funcional do Instituto Paulo

Montenegro, revela os nveis de alfabetismo funcional da
populao adulta brasileira.

Principais objetivos:
a) Oferecer informaes sobre as habilidades e prticas de
leitura, escrita e matemtica de brasileiros entre 15 e 64 anos;
b) Estimular iniciativas da sociedade civil;
c) Subsidiar a formulao de polticas pblicas nas reas de
educao e cultura.

Provinha Brasil

Provinha Brasil - instrumento de avaliao cognitiva para a

alfabetizao infantil, do INEP.

Integrao entre Provinha Brasil e Teste Cognitivo do

Programa Brasil Alfabetizado:
1) Compatibilizao entre as escalas;
2) Incluso de itens comuns aos dois estes permitindo:
a) Trabalho integrado;
b) Fortalecimento da qualidade e da continuidade da
educao.

Definio dos domnios da

Aprendizagem
Matrizes de Referncia :

uma referncia de avaliao, no abrange todas as

capacidades;

Descrevem conhecimentos considerados fundamentais em

Leitura/Escrita e em Matemtica.

Apresentam um conjunto de capacidades e de conhecimentos

passveis de serem verificados.

Est fundamentada tambm nos pressupostos do letramento.

Formato dos instrumentos de

Avaliao

Na Avaliao Cognitiva Amostral:

a) 20 cadernos de prova
b) Metodologia- Blocos Incompletos Balanceados - B.I.B
c) 10 itens de Leitura/Escrita, 2 itens de Leitura individual,
itens de Matemtica.
Na Avaliao Cognitiva Universal:
a) 02 cadernos de prova;
b) Manual do Aplicador;
c) Cadernos do Aplicador;
d) Gabaritos Comentados.
Diagramaes adaptadas realidade do pblico-alvo.

12

Metodologia de anlise de
resultados
Na Avaliao Cognitiva Amostral:

Testes aplicados e corrigidos por uma instituio de
pesquisa;

Teoria de Resposta ao Item (TRI), de 3 parmetros;
Na Avaliao Cognitiva Universal:

Testes aplicados e corrigidos localmente (equipes
das Secretarias de Educao).

Teoria de Resposta ao Item (TRI) de 1 parmetro.

Divulgao dos Resultados

Avaliao Cognitiva Amostral

Instituio de pesquisa de campo - aplicao dos testes,
correo, constituio dos bancos de dados e processamento
das informaes;

Instituio especialista em medidas educacionais e
alfabetizao - faz a anlise psicomtrica e pedaggica.
Avaliao Cognitiva Universal

Aplicada e corrigida pelas equipes das Secretarias Estaduais
e Municipais de Educao;

Resultados so informados via Sistema (on line) para anlise
por intermdio da utilizao da TRI de 1 parmetro.

Principais Resultados
Anlise dos dados : Modelo Multinvel

No teste de matemtica : homens, mais jovens, com

necessidade de lentes corretivas, que declararam saber ler e
escrever ao final do curso e que j haviam freqentado a escola se
saem melhor no teste.

No mbito das turmas, o estudo demonstrou que quanto maior o

percentual de alunos com necessidades especiais, pior o
desempenho mdio da turma.

Outras variveis significativas foram: ndice de planejamento

pedaggico e percentual de alfabetizandos na turma que
receberem visitas de agentes de sade em seus domiclios.

Principais Resultados

No teste de Leitura/escrita, as variveis significativas no

nvel aluno foram: idade, se portador de necessidades
especiais, se sabe ler e escrever e se j freqentou a
escola. O maior efeito foi na varivel saber ler e escrever.

Dentre as variveis da turma, destacaram-se: percentual de

alunos portadores de necessidades especiais, nmero de
dias de aula por semana e percentual de alfabetizandos
cuja me sabia ler e escrever.

Tambm no caso agregado, quanto maior o percentual de

alunos com necessidades especiais, pior o desempenho
mdio da turma.

Principais xitos
Na Avaliao Cognitiva Amostral:

Elaborao de instrumentos de avaliao especficos;

Constituio de banco de itens de avaliao;
Construo da escala nacional de proficincia em Leitura/Escrita
e Matemtica para o processo de alfabetizao;
Avaliao formativa da equipe tcnica do Ministrio da
Educao;
Subsdios para aperfeioamento e redesenho das aes do
Programa Brasil Alfabetizado;
Subsdios para o desenho das estratgias da Avaliao
Cognitiva Universal.

Principais xitos
Na Avaliao Cognitiva Universal:

Adeso das instituies parceiras;

Construo de documentos de apoio;
Construo de estratgias para incentivar a continuidade de
estudos em Educao de Jovens e Adultos;
Atualizao dos conhecimentos do professor por meio da
anlise dos eventuais erros dos alunos;
Desenvolvimento de atividades pedaggicas especficas para
cada turma.

Principais dificuldades
Avaliao Cogntiva Amostral:

Temporalidade da consolidao e anlise dos resultados;

Os eventuais atrasos na disponibilizao dos resultados;

Atuao em resposta:
O MEC vem trabalhando junto s instituies responsveis e
aos parceiros para traar uma estratgia conjunta para fazer
frente a este desafio.

Principais dificuldades
Avaliao Cognitiva Universal:

A construo de estratgias adequadas para coleta dos

resultados por intermdio de sistema de informao on line;

Processo paulatino de adeso dos parceiros, internalizando

o carter diagnstico da avaliao.

Consideraes sobre a Avaliao de aprendizagem

na Educao de Jovens e Adultos

A experincia brasileira tem demonstrado a necessidade de um

trabalho em duas frentes:
a) Rigor na aplicao e anlise dos resultados;
b) Subsidiar o trabalho pedaggico dentro de sala de aula;

Estratgia dupla:
a) Estruturao de uma pesquisa externa;
b) Envolvimento dos professores em um trabalho que garanta
sua autonomia e incentive o respeito e valorizao das
especificidades e dos saberes dos sujeitos na Educao de
Jovens e Adultos.

Consideraes sobre a Avaliao de aprendizagem

na Educao de Jovens e Adultos

Aspectos relevantes:


A participao de instituies com especializao em

determinadas dimenses da avaliao;

A integrao da avaliao cognitiva com outras avaliaes;

O desenvolvimento de uma rede de aprendizagem e

produo de conhecimento que potencializa:
a) elaborao de instrumentos;
b) metodologia, aplicaes e interpretao dos resultados.

OBRIGADO
Ministrio da Educao do Brasil MEC
Secretaria de Educao Continuada, Alfabetizao e
Diversidade
Diretoria de Polticas de Educao de Jovens e Adultos
Endereo: Esplanada dos Ministrios, Bloco L, Sala 711
CEP 70047-900 Braslia DF. Brasil.
Telefone: 55-61-21049530
Fax: 55-61-21049423
http://www.mec.gov.br/secad
e-mail: deja@mec.gov.br