MEC

Ministrio da Educao

INEP
Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira

ndice de Desenvolvimento da Educao Bsica (Ideb)

Reynaldo Fernandes*

* Presidente do Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira (Inep) e professor titular da Universidade de So Paulo.

Braslia-DF 2007

 Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira(Inep) permitida a reproduo total ou parcial desta publicao, desde que citada a fonte.
COORDENADORA-GERAL DE LINHA EDITORIAL E PUBLICAES Lia Scholze COORDENADORA DE PRODUO EDITORIAL Rosa dos Anjos Oliveira COORDENADORA DE PROGRAMAO VISUAL Mrcia Terezinha dos Reis EDITOR EXECUTIVO Jair Santana Moraes REVISO Antonio Bezerra Filho Marluce Moreira Salgado NORMALIZAO BIBLIOGRFICA Regina Helena Azevedo de Mello DIAGRAMAO E ARTE-FINAL Celi Rosalia Soares de Melo TIRAGEM 1.000 exemplares EDITORIA Inep/MEC Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira Esplanada dos Ministrios, Bloco L, Anexo I, 4 Andar, Sala 418 CEP 70047-900 Braslia-DF Brasil Fones: (61) 2104-8438, (61) 2104-8042 Fax: (61) 2104-9812 editoria@inep.gov.br DISTRIBUIO Inep/MEC Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira Esplanada dos Ministrios, Bloco L, Anexo II, 4 Andar, Sala 414 CEP 70047-900 Braslia-DF Brasil Fone: (61) 2104-9509 publicacoes@inep.gov.br http://www.inep.gov.br/pesquisa/publicacoes ESTA PUBLICAO NO PODE SER VENDIDA. DISTRIBUIO GRATUITA A exatido das informaes e os conceitos e opinies emitidos so de exclusiva responsabilidade do autor. Dados Internacionais de Catalogao na Publicao (CIP) Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira Fernandes, Reynaldo. ndice de Desenvolvimento da Educao Bsica (Ideb) / Reynaldo Fernandes. Braslia : Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira, 2007. 26 p. (Srie Documental. Textos para Discusso, ISSN 1414-0640 ; 26) 1. Indicador de desenvolvimento educacional 2. Educao Bsica. I. Instituto Nacional de Estudos e Pesquisas Educacionais Ansio Teixeira. II. Srie. III. Ttulo CDU 37:311

Sumrio
ndice de Desenvolvimento da Educao Bsica (Ideb)

APRESENTAO ...................................................................................................................... INTRODUO .......................................................................................................................... ASPECTOS CONCEITUAIS .................................................................................................... O INDICADOR PROPOSTO .................................................................................................... UMA APLICAO PARA OS ESTADOS BRASILEIROS ....................................................... CONSIDERAES FINAIS ..................................................................................................... REFERNCIAS BIBLIOGRFICAS .........................................................................................

5 7 8 13 16 16 21

APRESENTAO

Um nmero cada vez maior de educadores, formuladores de polticas, gestores e especialistas converge para a necessidade de se estabelecer padro e critrios para monitorar o sistema de ensino no Brasil. Experincias bem-sucedidas de melhoria no desempenho de redes e escolas comeam a ser registradas, apontando a importncia do uso de indicadores para monitoramento permanente e medio do progresso dos programas em relao s metas e resultados fixados. Tratando-se de iniciativas isoladas, cada experincia reflete a orientao dos responsveis pela gesto do sistema ou mesmo de uma unidade escolar e atende s necessidades locais especficas. A existncia de um ndice que sirva para ser aplicado nacionalmente, levando em considerao as peculiaridades de regies distintas, , assim, um desafio que precisa ser enfrentado quando se fala na necessidade de se estabelecer um padro de qualidade na educao do Pas. Neste Texto para Discusso, seu autor, Reynaldo Fernandes, coloca em debate a proposta de criao do ndice de Desenvolvimento da Educao Bsica (Ideb). Ele combina dois indicadores usualmente utilizados para monitorar nosso sistema de ensino: a) indicadores de fluxo (promoo, repetncia e evaso) e b) pontuaes em exames padronizados obtidas por estudantes ao final de determinada etapa do sistema de ensino (4 e 8 sries do ensino fundamental e 3 ano do ensino mdio). Seu pressuposto a evidente complementaridade entre ambos, lembrando que, mesmo que os alunos atinjam elevadas pontuaes nos exames padronizados, um sistema educacional que reprova sistematicamente seus estudantes, provocando o abandono de um nmero significativo deles, sem que completem a educao bsica, no desejvel; lembra, porm, que a concluso no perodo correto e com baixas taxas de abandono, mas que produzisse concluintes com deficincia de aprendizagem, tampouco o seria. Em suma, um sistema ideal seria aquele no qual todas as crianas e adolescentes tivessem acesso escola, no desperdiassem tempo com repetncias, no abandonassem os estudos precocemente e, ao final de tudo, aprendessem, pondera o autor. Por essa razo, sua proposta de que o ndice de Desenvolvimento Educacional considere tanto informaes de desempenho em exames padronizados como as de fluxo escolar, tendo como resultado a combinao de dois outros indicadores a) pontuao mdia dos estudantes em exames padronizados ao final de determinada etapa da educao bsica (4 e 8 sries do ensino fundamental e 3 ano do ensino mdio) e b) taxa mdia de aprovao dos estudantes da correspondente etapa de ensino , seja de fcil compreenso, simples de calcular, aplicvel s escolas e explcito em relao taxa de troca entre probabilidade de aprovao e proficincia dos estudantes.

Oroslinda Maria Taranto Goulart Diretora de Tratamento e Disseminao de Informaes Educacionais

ndice de Desenvolvimento da Educao Bsica (Ideb)

Reynaldo Fernandes INTRODUO Os indicadores de desempenho educacional utilizados para monitorar o sistema de ensino no Pas so, fundamentalmente, de duas ordens: a) indicadores de fluxo (promoo, repetncia e evaso) e b) pontuaes em exames padronizados obtidas por estudantes ao final de determinada etapa do sistema de ensino (4 e 8 sries do ensino fundamental e 3 ano do ensino mdio). importante ressaltar que os estudos e anlises sobre desempenho educacional raramente combinam as informaes produzidas por esses dois tipos de indicadores, ainda que a complementaridade entre elas seja evidente.1 Um sistema educacional que reprova sistematicamente seus estudantes, fazendo que grande parte deles abandone a escola antes de completar a educao bsica, no desejvel, mesmo que aqueles que concluam essa etapa atinjam elevadas pontuaes nos exames padronizados. Por seu lado, um sistema em que os alunos concluem o ensino mdio no perodo correto no de interesse caso eles aprendam muito pouco. Em suma, um sistema ideal seria aquele no qual todas as crianas e adolescentes tivessem acesso escola, no desperdiassem tempo com repetncias, no abandonassem os estudos precocemente e, ao final de tudo, aprendessem. No Brasil, a questo do acesso est praticamente resolvida, uma vez que quase a totalidade das crianas ingressa no sistema educacional. Nosso problema ainda reside nas altas taxas de repetncia, na elevada proporo de adolescentes que abandonam a escola sem concluir a educao bsica e na baixa proficincia obtida por nossos estudantes em exames padronizados. Assim, um indicador de desenvolvimento educacional deveria combinar tanto informaes de desempenho em exames padronizados como informaes sobre fluxo escolar. O objetivo do presente texto , exatamente, o de propor um indicador com tal caracterstica. Uma viso mais integrada de desenvolvimento educacional, que considera tanto o desempenho dos estudantes em testes padronizados como informaes de fluxo, a de que os exames como o Saeb e a Prova Brasil deveriam ser aplicados aos alunos de determinada gerao, em vez de aos de determinada srie. Nesse caso, o desempenho dos alunos atrasados, que se pressupe menor que o dos que esto na srie correta, estaria contemplado na medida de desenvolvimento educacional. Independentemente das vantagens e desvantagens de se ter um exame cuja referncia seja a gerao, o fato que os que so aplicados no Pas para aferir a proficincia dos alunos (Saeb, Prova Brasil e Enem) tm como base a srie. A nica exceo o Pisa (Programme for International Student Assessment), que aplicado aos alunos de 15 anos de idade. Neste caso, no

Uma das poucas excees pode ser encontrada em Arajo, Conde e Luzio (2004). Nesse trabalho, os autores propem um ndice que combina informaes de fluxo e atendimento escolar com o desempenho dos estudantes no Saeb. Conquanto a preocupao dos autores seja similar do presente artigo, a soluo proposta bastante distinta.

entanto, a amostra representativa apenas para o Pas como um todo, impedindo que a medida de desempenho seja aplicvel s escolas e redes de ensino.2 Deste modo, para se obter uma medida que seja disponvel em um nvel mais desagregado (escolas e redes de ensino), necessrio buscar uma alternativa. O indicador aqui proposto o resultado da combinao de dois outros indicadores: a) pontuao mdia dos estudantes em exames padronizados ao final de determinada etapa da educao bsica (4 e 8 sries do ensino fundamental e 3 ano do ensino mdio) e b) taxa mdia de aprovao dos estudantes da correspondente etapa de ensino. Ele possui a vantagem de ser de fcil compreenso, simples de calcular, aplicvel s escolas e explcito em relao taxa de troca entre probabilidade de aprovao e proficincia dos estudantes. Ou seja, o indicador torna claro o quanto se est disposto a perder na pontuao mdia do teste padronizado para se obter determinado aumento na taxa mdia de aprovao. ASPECTOS CONCEITUAIS Possuir um indicador sinttico de desenvolvimento educacional seria desejvel, entre outros motivos, para: a) detectar escolas e/ou redes de ensino cujos alunos apresentem baixa performance e b) monitorar a evoluo temporal do desempenho dos alunos dessas escolas e/ ou redes de ensino.3 Para tanto, ter que optar entre um indicador de fluxo e um de desempenho em testes padronizados pode no se mostrar uma tarefa simples, isso em virtude da possibilidade de existir trade-offs entre eles.

Note-se que medidas de proficincia em exames padronizados e ndices de fluxo escolar no so independentes entre si. Por exemplo, a adoo de uma medida que melhore o aprendizado dos alunos, fixado o padro de aprovao, tende tanto a elevar a proficincia nos testes padronizados como a reduzir a taxa de repetncia.4 Se a relao entre indicadores de proficincia em exames padronizados e indicadores de fluxo fosse sempre desse tipo, no haveria grandes problemas em escolher entre eles, uma vez que a melhora (piora) de um indicador implica melhora (piora) do outro. A dificuldade de escolha maior ante a possibilidade de eles caminharem em sentidos opostos. Suponhamos que, ao invs de uma medida que melhore o aprendizado dos alunos, adote-se uma reduo no padro de aprovao. Nesse caso, as taxas de repetncia seriam reduzidas, mas, muito provavelmente, teramos uma reduo na proficincia mdia dos estudantes. Os motivos que levam o Brasil a apresentar elevadas taxas de reteno escolar tm sido bastante discutidos na literatura e dado margem a uma grande polmica.5 Independentemente da verdadeira explicao, se que existe uma nica, o fato que no se pode descartar a possibilidade de as escolas e/ou redes de ensino adotarem medidas que melhorem o fluxo e piorem o desempenho nos exames padronizados e viceversa. Nesse caso, se a cobrana for restringida apenas aos indicadores de fluxo, ela pode incentivar os professores, diretores de escolas e gestores de rede a adotarem medidas que impliquem reduo no desempenho mdio dos estudantes nos testes padronizados, como, por exemplo, reduzir o padro de aprovao. Por

Fernandes e Natenzon (2003) propem uma forma de transformar as notas do Saeb de srie para gerao. Sem entrar em considerao sobre a validade das hipteses utilizadas, o mtodo s pode ser aplicado em nveis bastante agregado (Estados, Regies e Brasil). As autoridades educacionais poderiam, por exemplo, financiar programas para promover o desenvolvimento educacional de redes de ensino em que os alunos apresentam baixo desempenho. Assim, monitorar as redes financiadas, para verificar se elas apresentam uma melhora de desempenho, fundamental. Alis, o financiador poderia estipular previamente o avano desejado no indicador como contrapartida para a liberao de recursos. Por padro de aprovao entende-se os conhecimentos e habilidades mnimos que, idealmente, os alunos deveriam adquirir para serem aprovados. Ver, por exemplo, Brando, Baeta e Rocha (1983), Ribeiro (1991), Silva e Davis (1993), Schiefelbein e Wolff (1993) e Paro (2000).

outro lado, se a cobrana for apenas sobre os scores dos alunos, o incentivo o oposto, como, por exemplo, elevar o padro de aprovao.6 Na possibilidade de existir tal trade-off, importante que o indicador de desenvolvimento educacional explicite a taxa de troca aceitvel entre probabilidade de aprovao e proficincia dos estudantes: o quanto se est disposto a perder na pontuao mdia do teste padronizado para se obter determinado aumento na taxa mdia de aprovao. Ainda que fixar essa taxa no seja algo isento de controvrsias, importante que a opo seja claramente revelada pelo indicador. Para iniciar a discusso conceitual sobre o ndice de Desenvolvimento da Educao Bsica (Ideb), seria interessante retornarmos ao caso dos exames padronizados realizados com base nas geraes. Aqui, todos os alunos com idade adequada para cursar uma determinada srie, ou uma amostra representativa deles, so avaliados. Vamos admitir que a idade considerada seja aquela adequada para cursar a ltima srie da primeira etapa do ensino fundamental (quarta srie do ensino fundamental de oito anos), que todos os alunos ingressem na escola com a idade correta e que no haja evaso at a concluso dessa etapa. Assim, todas as crianas avaliadas teriam freqentado a escola por um mesmo perodo de tempo, embora se encontrando em sries distintas em virtude de repetncias. A pergunta que tal medida visaria responder : o que as crianas sabem aps quatro anos de escola? Note-se que se a troca de redes de ensino e/ou escolas, por parte dos alunos, for pequena ou se ela seguir um padro aproximadamente aleatrio, tal medida poder ser aplicada a essas redes de ensino e s escolas, entretanto sua adoo ser mais difcil em etapas mais

avanadas do ciclo escolar. Por exemplo, os alunos de determinada escola de ensino mdio com idade adequada para cursar o 3 ano podem ter diferentes tempos de permanncia na escola em virtude de repetncias em etapas anteriores. Assim, o uso do score mdio da gerao seria mais adequado para monitorar o sistema de ensino como um todo (Brasil, Estados e Municpios) e menos adequado para monitorar redes de ensino e escolas, isto porque muitas escolas e redes de ensino so especializadas em determinadas etapas da educao bsica. Ainda que os alunos tendessem a cursar toda a educao bsica nas escolas e/ou redes de ensino em que ingressaram, algum poderia considerar que o importante seria avaliar as habilidades e conhecimentos adquiridos ao final de determinada etapa de ensino, em vez das habilidades e conhecimentos adquiridos aps um determinado tempo de permanncia na escola. O sucesso educacional dos alunos que ingressam em determinada escola e/ou rede de ensino seria mais bem avaliado ao final do processo ou, ao menos, ao final de determinadas etapas consideradas demarcadoras. Nesse caso, no entanto, seria necessrio avaliar no apenas os conhecimentos e habilidades adquiridas pelos estudantes ao final da etapa especfica, mas tambm o tempo necessrio para conclu-la. Para nossos propsitos, o aspecto importante a destacar que diferentes medidas podem gerar incentivos distintos s escolas e/ ou redes de ensino, no que se refere ao padro de aprovao. Tomemos novamente o exemplo em que os alunos so avaliados na idade adequada para cursar a ltima srie da primeira etapa do ensino fundamental. Suponhamos que, no ano anterior avaliao, um determinado estudante tenha chegado ao final do ano letivo com desempenho considerado crtico, e a deciso que a escola tem que tomar se o aprova ou reprova.7 Caso a escola se guie apenas pelo

de se notar que mexer nos padres de aprovao pode ser muito mais fcil do que adotar medidas que promovam um melhor aprendizado dos estudantes. Admita-se que o exame padronizado realizado sempre no final do ano letivo.

resultado da avaliao, ela necessita ponderar em que situao a aquisio de habilidades e conhecimentos maior. Se reprovar o estudante, ela impede que ele seja exposto a novos contedos que sero avaliados no exame do ano seguinte; se o aprova, ela no lhe possibilita solidificar a aprendizagem referente aos contedos da srie em que hoje se encontra. Suponhamos que a pontuao esperada caso esse aluno realize o exame hoje seja N e a pontuao esperada para o ano seguinte seja N + X e N + Y, em caso de aprovao e reprovao, respectivamente. Ento, a regra de aprovao clara: aprova-se o aluno caso X > Y e reprova-se o estudante caso Y > X. razovel admitir que os estudantes que conseguem obter um bom desempenho ao final do ano letivo tenham muito pouco a ganhar em conhecimentos e habilidades caso sejam reprovados, enquanto aqueles que obtm um desempenho fraco provavelmente tenham maiores ganhos, de modo que X Y seja uma , com funo crescente de N: . Nesse caso, o padro de aprovao seria fixado de tal modo que aqueles que consigam super-lo possuam X > Y e aqueles que no o atinjam possuam Y > X. Caso X > Y ocorra para todos os estudantes, a reprovao ser eliminada. Embora essa regra de aprovao seja tima para maximizar o resultado da avaliao, no significa, necessariamente, que o seja para a carreira estudantil dos alunos. Admitamos que, no exemplo acima, o estudante que chegou ao final do ano letivo com desempenho considerado crtico, obteve X > Y > 0 e, portanto, foi aprovado. Entretanto, caso tivesse sido reprovado, iniciaria a srie seguinte com uma pontuao esperada de N + Y, ao invs de N, e, portanto, seria razovel admitir que, ao final da srie subseqente, obteria um desempenho superior a N + X, digamos N + Z com Z > X.8 Supondo que a srie subseqente seja a do final da etapa educacional, teramos uma perda esperada de desempenho ao final da

primeira etapa do ensino fundamental de Z X, quando comparado com a situao de ele ter sido reprovado, no entanto ele terminaria essa etapa de ensino um ano mais cedo. Este exemplo mostra que a avaliao dos estudantes com base na gerao pode incentivar as escolas e redes de ensino a adotarem determinada taxa de troca entre a proficincia esperada dos estudantes ao final de uma etapa de ensino e o tempo mdio de durao para sua concluso, a qual pode variar entre escolas e entre redes de ensino. Alis, o incentivo para se adotar determinada taxa de troca estar presente em qualquer medida que pondere indicadores de desempenho em exames padronizados e de fluxo escolar. A dificuldade em estabelecer um indicador de desenvolvimento educacional a de justificar que a taxa de troca por ele sinalizada razovel. Consideremos que a forma geral do ndice de Desenvolvimento da Educao Bsica (Ideb) seja dada por (1). ; onde, IDEBj = ndice de Desenvolvimento da Educao Bsica da unidade j (escola, rede de ensino, municpio, etc.); = proficincia esperada, em determinado exame padronizado, para estudantes da unidade j ao final da etapa de ensino considerada; = tempo esperado para concluso da etapa para os estudantes da unidade j; = derivada parcial de f( ) em relao a k. Assim, o Ideb crescente com a proficincia mdia dos estudantes e decrescente com o tempo mdio de concluso. importante (1)

Admita-se que N + X supera o padro de aprovao da srie seguinte.

10

ressaltar que, em teoria, tanto

como

devem

se referir aos alunos ingressantes e no apenas queles que, de fato, concluem a etapa. Ou seja, quais seriam o desempenho e o tempo de durao mdio caso todos os estudantes no desistissem da escola. Sendo C um ndice para indicar que o aluno concluiu a etapa, de se supor que e ,

A dificuldade em se fixar a taxa de troca decorre da falta de clareza de como a relao entre repetncia e desempenho determinada no mbito das escolas9 e, principalmente, como determinar em que medida um aumento da proficincia esperada melhor para o futuro dos estudantes quando esse aumento vem acompanhado de um aumento na probabilidade de repetncia. As elevadas taxas de repetncia do Pas apontam para a existncia de algo errado com nosso sistema educacional. Entretanto, isso no significa que a reprovao de alunos em si no possua alguma funcionalidade e que o ideal seria ter um sistema com taxa de reprovao igual a zero. Trs justificativas usuais para se promover a reteno de alunos so: i) permitir aos que no obtiveram desempenho adequado a oportunidade de se recuperarem e, assim, prosseguirem no sistema de forma mais apropriada; ii) incentivar os alunos a aumentar o empenho na obteno de habilidades e conhecimentos; e iii) impedir que alunos sem os conhecimentos mnimos avancem no sistema, o que viria a atrapalhar o desenvolvimento dos que esto aptos para a srie seguinte. As justificativas acima tm em comum o fato de que enquanto a reprovao depende do desempenho obtido pelos alunos tambm ela afeta esse desempenho. A validade de cada uma , evidentemente, questionvel, mas elas no podem ser descartadas a priori. No restante desta seo, vamos nos ater primeira dessas justificativas, deixando para a seo seguinte a considerao das demais.10 Vamos admitir que, em determinada escola e em determinada srie, seja a proficincia obtida pelo aluno i ao final do ano letivo. Caso ele seja reprovado, o desempenho no final do , onde suposto o ano seguinte ser

isso porque os alunos que deixam a escola tendem a ser os de pior desempenho. Extraindo o diferencial de (1) e igualando-o a zero (dIDEB = 0), temos:

(2) ou,

(2) As expresses (2) e (2) do as taxas de troca entre a proficincia esperada dos estudantes e o tempo mdio de durao da etapa de ensino, em termos de variaes absoluta e percentual, respectivamente. Note-se que, como , ento as taxas de troca so positivas, significando que um aumento em tem que ser . compensado por um aumento em Considerando (2), se a taxa for 1, significa que tem que ser um aumento 10% em compensado por um aumento de 10% em , para que o Ideb se mantenha constante. Caso o seja menor (maior) que 10%, o aumento em Ideb diminuir (aumentar). Vale ressaltar que a taxa de troca no necessita ser constante, podendo variar com e .
9 10

Por exemplo, como as escolas podem afetar o desempenho dos estudantes alterando padres de aprovao? A argumentao de que a repetncia no aumenta os conhecimentos e habilidades dos repetentes bastante usual. A principal evidncia utilizada em favor dessa tese que a pontuao mdia dos repetentes no Saeb inferior dos no-repetentes. Entretanto, tal inferncia no vlida. Em primeiro lugar, o Saeb informa se o aluno teve alguma repetncia e no especifica se ela ocorreu no ano anterior. Assim, muitos dos que apresentam alguma repetncia no so repetentes da srie atual. Mesmo para os repetentes da srie atual, o fato de eles apresentarem um pior desempenho que os no-repetentes no implica que eles no estejam melhores do que estavam no ano anterior, quando foram reprovados.

11

mesmo para todos os estudantes. Vamos admitir ainda que, nessa escola e srie, exista um nmero infinito de alunos cujas proficincias so, ao final do ano letivo, uniformemente distribudas no intervalo . Ento, o desempenho mdio dos estudantes ao final do ano . A regra para aprovao da escola aprovar todos aqueles com , de modo que, se p a proporo de aprovados, . Assim, a proficincia mdia dos alunos aprovados . Ou seja, quanto maior for a taxa de repetncia, maior ser o desempenho mdio dos aprovados.11 Suponhamos agora que a distribuio de proficincias acima no se refira a todos os alunos que cursaram a srie, mas apenas queles que a cursaram pela primeira vez, e o interesse seja obter a proficincia esperada desses alunos aps a concluso, bem como o tempo mdio necessrio para conclu-la. a proficincia mdia dos conSeja cluintes que finalizaram a srie aps t-la a proporo de aprovados cursado k vezes, a razo entre a nota obtida no k-simo ano e por uma aluno aps cursar a srie pela k-sima vez e a nota obtida por esse aluno no ano imediatamente anterior. Ento

Se o desempenho mdio dos reprovados que esto cursando a srie pela k-sima vez for menor do que o dos que se encontram na srie pela k1-sima vez, ento M1 >M2 > M3 > ...... e P1 > P2 > P3 > ...... Nesse caso, M uma soma infinita de termos decrescentes, e quanto mais rpido decrescer Pk, menor ser M. No entanto, seria conveniente admitir que a proporo de aprovados sempre a mesma, de modo que a distribuio de proficincia sempre a mesma, independentemente de k. Assim, a proficincia esperada (M) e tempo mdio de concluso (T) so dados por (5) e (6). (5)

(6) Tanto M como T se reduzem com p. Notese que, como a proporo de aprovao sempre a mesma, ela poderia, em equilbrio estacionrio, ser obtida diretamente como a proporo de aprovados na srie, que incluiria infinitas geraes de ingressantes. De (5) e (6) fcil calcular a taxa de troca entre M e T que est disponvel para a escola. No entanto, como o tempo esperado para concluir a srie inversamente proporcional taxa de aprovao, no h nenhum inconveniente de que a taxa de troca seja calculada entre M e p, a qual dada por: (7)

e (3) J a proficincia esperada aps a concluso da srie dada por (4).

(4)

Nesse caso, a taxa de troca negativa, indicando que um aumento na taxa de aprovao implica reduo na proficincia dos concluintes. Note que a taxa de troca decrescente em relao a p, de modo que, quando p muito pequeno, um aumento na proporo de aprovados praticamente no reduz a proficincia mdia dos estudantes. medida que p vai

11

Seria mais correto considerar o limite mnimo da distribuio de notas como sendo o N min da srie imediatamente anterior. Entretanto, fixar o limite mnimo como zero facilita a exposio sem impor qualquer perda de generalidade ao nosso argumento.

12

crescendo, o aumento na taxa de aprovao vai requerendo uma reduo mais significativa na proficincia mdia dos concluintes. No limite, quando p = 1, a taxa de troca 1, indicando que um aumento de 1% na taxa de aprovao implica uma reduo de 1% na proficincia mdia dos concluintes. O Ideb, especificado em (1), refere-se s mdias de proficincia e do tempo de durao dos concluintes de determinada etapa educacional e no de uma srie especfica. Entretanto, se p r (r = 1, 2,...,n) a taxa de aprovao da r-sima srie da etapa educacional considerada, ento o tempo mdio de durao da etapa : (8) Em (8), seria uma taxa mdia de aprovao da etapa educacional. Assim, o Ideb poderia ser reescrito como, (9) O exemplo acima, ainda que extremamente simplificado, pode nos servir de guia na difcil tarefa de fixar a taxa de troca entre proficincia esperada e taxa mdia de aprovao do Ideb.

padronizado realizado ao final da etapa de ensino; Pj = taxa mdia de aprovao na etapa de ensino dos alunos da unidade j;

= parmetro que fornece o peso da proficincia

mdia no Ideb;

= parmetro que fornece o peso de taxa mdia

de aprovao no Ideb. Em (10), a mdia de proficincia dos estudantes da unidade j obtida diretamente dos que foram submetidos a determinada edio do exame padronizado ao final da etapa educacional considerada. Assim, mesmo admitindo equilbrio estacionrio, Nj pode ser um estimador enviesado de . Em primeiro lugar, a presena de evaso durante a etapa de ensino pode levar N j a superestimar , uma vez que aqueles que evadem tendem a ter pior desempenho. Por outro lado, o exame padronizado geralmente aplicado antes de se determinar quem , ou no, aprovado naquele ano. Isso, por sua vez, tende N j a subestimar .12 A hiptese aqui de que esses dois tipos de vis mais ou menos se compensem e que Nj seja uma boa medida de . A proficincia mdia padronizada para estar entre zero e um, . A padronizao de modo que dada por (11). (11) onde, Sj = proficincia mdia, no padronizada, dos alunos da unidade j;

O INDICADOR PROPOSTO A forma geral do Ideb proposto neste texto dada por (10).

e onde,

10)

Sinf= limite inferior da mdia de proficincias; Ssup= limite superior da mdia de proficincias. Assim, para qualquer unidade escolar que obtenha , a proficincia mdia ser fixada

Nj = proficincia mdia dos alunos da unidade j obtida em determinada edio do exame

12

O fato de os exames geralmente serem aplicados entre o final de outubro e o comeo de novembro ameniza um pouco esse problema. Nessa altura, muitos dos que sero reprovados j no mais esto freqentando a escola e, assim, no so submetidos ao exame.

13

em em

. Por sua vez, aquelas unidades que tero o desempenho fixado .

obtenham

Caso o tempo necessrio para concluso da etapa escolar (sem repetncias) seja normalizado em 1 (um), P o inverso do tempo mdio de durao para concluso da etapa (T). Deste modo, temos que , ou seja, o

J a taxa mdia de aprovao, Pj, obtida conforme (8), onde a proporo de aprovados em cada uma das sries da etapa considerada, pr, calculada diretamente do Censo Escolar. Note-se que, na ausncia de evaso durante a etapa e em equilbrio estacionrio, d o tempo

indicador fica sendo a pontuao no exame padronizado ajustada pela razo entre o tempo necessrio para concluso da etapa e o tempo efetivamente despendido para conclu-la. No exemplo da seo anterior, onde a distribuio de notas uniforme e a taxa de aprovao a mesma para repetentes e norepetentes, o Ideb acima incentivaria as unidades escolares a eliminar a repetncia. Como vimos, para taxas de aprovao menores que 1, a taxa de troca das unidades escolares sempre maior que 1 e, deste modo, elas conseguem um aumento no Ideb, por elevar a taxa de aprovao. Assim, se as unidades escolares desejassem maximizar o indicador e se a nica forma que elas possussem para aumentar a proficincia mdia dos concluintes fosse permitir aos alunos reprovados obter, no ano subseqente reprovao, um melhor desempenho, as repetncias seriam eliminadas. O problema com esse resultado que ele foi obtido com hipteses muito particulares, em especial a de que a distribuio de notas uniforme e sempre a mesma, independentemente de os alunos estarem cursando a srie pela primeira, segunda ou terceira vez. No entanto, possvel mostrar que tal resultado seria ainda aproximadamente vlido se a distribuio de notas fosse normal, desde que o desvio-padro fosse suficientemente menor que a mdia, como parece ser o caso para escala do Saeb.13 O maior problema reside na hiptese de que a distribuio de notas para alunos reprovados no ano subseqente reprovao seja idntica distribuio dos alunos que esto cursando a srie pela primeira vez. No exemplo da seo anterior, o fato de a distribuio original de notas ser reconstituda no

mdio de durao da etapa para os estudantes da unidade j. Novamente, a existncia de evaso durante a etapa tende a superestimar Pj e, assim, subestimar o tempo mdio de durao. Por fim, a taxa de troca entre proficincia mdia e taxa mdia de aprovao de (10) dada por: (12)

importante ressaltar que o Ideb definido em (10) no um ndice propriamente dito, mas uma famlia de ndices. Existe um ndice especifico para diferentes valores de e . Por exemplo, se = 0 e =1, temos que IDEBj = Pj, ou seja, apenas a taxa mdia de aprovao considerada. Por outro lado, se = 1 e = 0, ento IDEBj = Nj, e apenas a proficincia mdia levada em conta. Uma situao interessante de analisar quando = . Neste caso, a taxa de troca igual a 1, de modo que um aumento de 1% na taxa mdia de aprovao pode ser compensado por uma reduo de 1% na proficincia mdia dos concluintes. Vale notar que a ordenao das unidades escolares invariante com diferentes valores de , e, assim, seria conveniente fixar = = 1, de forma que o Ideb seria dado por (13). IDEBj = Nj Pj (13)

13

Ver apndice I.

14

ano seguinte para os reprovados uma decorrncia de ter sido considerada sempre a mesma taxa de aprovao, p = p1 = p2 = p3 = ..... A conseqncia disso que o aprendizado dos alunos repetentes uma funo crescente da taxa de aprovao, . Ao aumentar a

uniformemente distribudas no intervalo , onde maior . Assim, quanto

, maior o impacto das repetncias na

proficincia mdia dos estudantes que cursam a srie pela primeira vez. Nesse caso, a proficincia mdia dos estudantes ao final do ano letivo aprovados dada por . , a proficincia mdia dos alunos e a taxa de troca

taxa de aprovao, a escola possibilita um melhor aprendizado aos alunos repetentes, proporcionando, por exemplo, um melhor atendimento dos professores a esses alunos. Evidentemente, tal hiptese questionvel, e algum poderia considerar que manter os s fixos seria mais apropriado. Nesse caso, ao fixar o padro de aprovao, a escola s determinaria a proporo de aprovados para os alunos que esto cursando a srie pela primeira vez; as demais taxas de aprovao (p2 , p3 , p4 ,.....) seriam predeterminadas. A conseqncia de tal hiptese que a taxa tima de aprovao para os alunos que cursam a srie pela primeira vez vai depender dos fatores de aprendizado (ys). No apndice II, apresentamos um exemplo onde = 1 = 2 = 3 = ..... Em tal exemplo, a taxa tima de aprovao para os alunos que cursam a srie pela primeira vez 1 (um), desde que < 2. Caso > 2, p1 ser zero. Assim, se reprovaes so pouco eficientes para promover o aprendizado, o indicador proposto em (13) incentivaria as escolas a eliminar as repetncias. Por fim, cabe ressaltar que obter taxas de aprovao diferentes de 1 seria compatvel com (13), caso as reprovaes aumentassem o aprendizado daqueles que esto cursando a srie pela primeira vez. Isso poderia ocorrer porque a possibilidade de reprovao aumenta o esforo dos alunos para obterem melhores resultados ou porque alunos com fraco desempenho influenciam negativamente a performance daqueles com melhor desempenho. No exemplo da seo anterior, isso poderia ser representado por fazer o limite superior da distribuio de notas variar negativamente com a proporo de aprovados. Por exemplo, podemos admitir que as proficincias sejam, ao final do ano letivo,

de se notar que a taxa de troca sempre decrescente com p, de modo que se ela for maior que 1 e o Ideb for o dado por (13), sempre vantajoso para as unidades escolares irem aumentando a taxa de aprovao at que a taxa de troca se iguale a 1. No caso de = 0 temos o caso original, e vantajoso, para as unidades escolares, eliminar a repetncia. No outro caso extremo, onde = 1, a taxa de troca vai de 1 (quando p = 0) a 2 (quando p = 1), e vantajoso, para as unidades escolares, reprovar todos os alunos. De modo geral, a taxa de aprovao tima, p*, dada por (14). (14) Assim, para , teremos , e p* cresce medida que decresce. Portanto, se a repetncia aumenta o aprendizado daqueles que esto cursando a srie pela primeira vez, haver uma taxa de reprovao tima diferente de zero para o Ideb fixado em (13). Em suma, a discusso acima sugere que a formulao do Ideb dada por (13) levaria as escolas a operarem com baixas taxas de reprovao, a no ser que repetncias tenham um forte impacto positivo no aprendizado dos alunos (repetentes ou no). A formulao dada por (13) a proposta pelo presente texto para fixao do Ideb.

15

UMA APLICAO PARA OS ESTADOS BRASILEIROS

As Tabelas 1 e 2 apresentam os resultados do Ideb dos Estados brasileiros para a primeira e segunda fases do ensino fundamental, respectivamente. Os dados de desempenho foram extrados da Prova Brasil referente ao ano de 2005. Foram consideradas apenas escolas pblicas urbanas (federais, estaduais e municipais) com mais de 30 alunos nas classes de 4 e 8 sries do ensino fundamental registrados no Censo Escolar de 2005. O limite inferior das notas foi o de 3 (trs) desvios-padro abaixo da mdia e o limite superior, o de trs desvios acima. Para fixao desses limites, utilizou-se a distribuio de notas de 1997, ano em que a escala do Saeb foi definida. Os limites inferiores de Matemtica foram 60 e 100 para 4 a e 8 a sries, respectivamente, enquanto os limites superiores foram 322 e 400. Para Lngua Portuguesa, os resultados foram 49 e 100 para os limites inferiores e 324 e 400 para os limites superiores. A taxa de aprovao refere-se ao ano de 2005 e foi obtida com base nos Censos Escolares de 2005 e 2006. Considerou-se a taxa de aprovao mdia entre a srie inicial e a 4a srie do ensino fundamental (primeira fase do EF) e entre a 5 a e a 8 a sries do ensino fundamental (segunda fase do EF). A medida de proficincia do Ideb foi a mdia das notas padronizadas de Lngua Portuguesa e Matemtica. Os resultados da Tabela 1 mostram que So Paulo possui o melhor Ideb para a primeira fase do ensino fundamental, embora no possua o melhor desempenho na Prova Brasil. O resultado de So Paulo se deve, em grande parte, ao fato de ele possuir a maior taxa mdia de aprovao entre todos os Estados. O Distrito Federal, por sua vez, possui o melhor desempenho na Prova Brasil, mas existem seis Estados com taxas mdias de aprovao maiores do que a sua.

A Tabela 2 mostra que os resultados para a segunda fase do ensino fundamental no diferem muito em relao primeira fase dessa etapa de ensino. Novamente, So Paulo possui o melhor Ideb e a maior taxa mdia de aprovao, mas no o melhor desempenho na Prova Brasil.

CONSIDERAES FINAIS O presente texto teve por objetivo apresentar uma proposta para um ndice de desenvolvimento educacional que considere tanto informaes de desempenho em exames padronizados como informaes sobre fluxo escolar. O indicador proposto o resultado da combinao de dois outros indicadores: a) pontuao mdia dos estudantes em exames padronizados ao final de determinada etapa do ensino fundamental (4 e 8 sries) e 3 ano do ensino mdio; e b) taxa mdia de aprovao dos estudantes da correspondente etapa de ensino. Uma discusso conceitual acerca das propriedades do indicador sugere que ele incentiva as unidades escolares (escolas e redes de ensino) a operarem com baixas taxas de reprovao, a no ser que repetncias tenham um forte impacto positivo no aprendizado dos alunos (repetentes ou no). Apresentou-se, tambm, uma aplicao para as unidades da Federao, mostrando que os resultados do Ideb so muito similares entre a primeira e a segunda fase do ensino fundamental. O indicador proposto possui a vantagem de ser de fcil compreenso, simples de calcular, aplicvel s escolas e explcito em relao taxa de troca entre probabilidade de aprovao e proficincia dos estudantes. Ou seja, o indicador torna claro o quanto se est disposto a perder na pontuao mdia do teste padronizado para se obter determinado aumento na taxa mdia de aprovao. Entretanto, vrios aprimoramentos so possveis, como, por exemplo, incluir a disperso das notas, ao invs de se considerar apenas o desempenho mdio. Por outro lado, seria

16

necessrio aprimorar nosso entendimento de como as escolas podem afetar o desempenho mdio dos concluintes; isso nos permitiria adotar uma escolha mais criteriosa da forma funcional do Ideb. Por fim, e mais importante, seria necessrio avanar nossos conhecimentos sobre as conseqncias, para a vida futura dos estudantes, de se adotar diferentes padres de

aprovao por parte das escolas, o que nos permitiria produzir um indicador cujo objetivo fosse o de maximizar o bem-estar dos alunos. De qualquer modo, acreditamos que o ndice aqui proposto um avano em relao aos indicadores atualmente utilizados para monitorar o sistema de ensino no Pas.

17

Tabela 1 Taxa de Aprovao, Desempenho na Prova Brasil e ndice de Desenvolvimento da Educao Bsica (Ideb): 1 fase do Ensino Fundamental Rede Pblica

18

Tabela 2 Taxa de Aprovao, Desempenho na Prova Brasil e ndice de Desenvolvimento da Educao Bsica (Ideb): 2 fase do Ensino Fundamental Rede Pblica

19

20

REFERNCIAS BIBLIOGRFICAS ARAJO, C. H.; CONDE, F. N.; LUZIO, N. ndice de qualidade da educao fundamental (IQE): proposta para discusso. Revista Brasileira de Estudos Pedaggicos, Braslia, v. 85, n. 209/210/211, p. 126-136, 2004. BRANDO, Z.; BAETA, A. M. B.; ROCHA, A. D. C. O Estado da arte da pesquisa sobre evaso e repetncia no ensino de 1o grau no Brasil (1971-1981). Revista Brasileira de Estudos Pedaggicos, Braslia, v. 64, n.147, p. 39-69, maio/ago. 1983. FERNANDES, R.; NATENZON, P. E. A evoluo recente do rendimento escolar das crianas brasileiras: uma reavaliao dos dados do Saeb. Estudos em Avaliao Educacional, So Paulo, n. 28, p. 3-22, 2003. PARO, V. H. Por que os professores reprovam: resultados preliminares de uma pesquisa. Ensaio: Avaliao e Polticas Pblicas em Educao, Rio de Janeiro, v. 8, n. 28, p. 273-282, 2000. RIBEIRO, S. C. A pedagogia da repetncia. Estudos Avanados, So Paulo, v. 5, n. 12, p. 7-21, 1991. SCHIEEFELBEIN, E.; WOLFF, L. Repetition and inadequate achievement in Latin Americas primary schools: a review of magnitudes, causes, relationships and strategies. Estudos em Avaliao Educacional, So Paulo, n. 7, p. 45-87, 1993. SILVA, R. N.; DAVIS, C. proibido repetir. Estudos em Avaliao Educacional, So Paulo, n. 7, p. 544, 1993.

21

22

APNDICE I TAXA TIMA DE APROVAO COM DISTRIBUIO DE NOTAS NORMAL

Seja x uma varivel aleatria, de modo que: (AI-1) Se , ento: (AI-2)

onde ( ) a funo distribuio da normal padronizada e distribuio.

a funo densidade da mesma

Considerando x a nota de um determinado estudante, a o padro de aprovao e M a mdia dos estudantes aprovados, temos: (AI-3)

Como

, (AI-3) pode ser reescrita como,

(AI-3) A probabilidade de aprovao, p, dada por , ento: (AI-4) De (AI-3) e (AI-4) obtemos, (AI-5)

23

ou, (AI-5) Fixando , (AI-5) pode ser reescrita como:

(AI-6)

Note que positivo para padres de aprovao acima da mdia e negativo para padres de aprovao abaixo da mdia. Assim, se as unidades escolares desejam maximizar a nota mdia dos aprovados, a taxa mnima de aprovao para o Ideb fixado em (13) de 50%, independentemente do valor de . Isso porque se > 0, a taxa de troca disponvel para a unidade escolar sempre maior que 1, de modo que elas conseguiro aumentar o indicador aumentando a taxa de aprovao. A taxa tima de aprovao ser dada por . No caso do Saeb, isso implicaria taxas de

aprovao extremamente elevadas. Por exemplo, o Saeb fixa, para a 8 srie em 1997, uma mdia de 250 com desvio-padro de 50. Portanto, = 0,2. Nesse caso, o padro de aprovao seria fixado cinco desvios-padro abaixo da mdia, o que implicaria aprovar, praticamente, todos os alunos.

24

APNDICE II TAXA TIMA DE APROVAO COM FIXO E DISTRIBUIO DE NOTAS UNIFORMES

Suponha que = 1 = 2 = 3 = ....., de modo que p2 = p3 = p4 = ..... e M2 = M3 = M4 = ...... Ento, M = p1M1 = (1 p1)M2 (AII-1)

De (AII-1) tem-se que, (AII-2) O tempo mdio de durao da srie e a derivada da taxa mdia de aprovao em relao a p1 so dados por (AII-3) e (AII-4), respectivamente. (AII-3)

(AII-4) De (AII-2) e (AII-4) temos, (AII-5)

O Ideb dado por

. Derivando o Ideb em relao a p1 e igualando o resultado a zero temos

os pontos candidatos a mximo. (AII-6)

(AII-7)

25

O nico ponto candidato a mximo dado por (AII-7). Substituindo (AII-7) em (AII-5) temos que . Extraindo a derivada da segunda do indicador obtemos,

(AII-8) Substituindo (AII-7) em (AII-8), temos que o primeiro termo de (AII-8) zero e, ento, (AII-7) um ponto de mnimo. Assim, o Ideb assumir seu mximo em um dos extremos de p1: p1 = 0 ou p1= 1. Quando p1 = 1, caso . J quando p1 = 0, . O Ideb ser mximo com ,

. Ou seja, com < 2.

26

27

28