Avaliando as avaliações da Capes

Abstract

Este é um estudo na área da política educacional, descrevendo e analisando a formulação, a avaliação e o aperfeiçoamento de instrumentos, de avaliação dos programas ,de pós-graduação existentes no Brasil, com implicações para a alocação de recursos públicos.Em meados de 1982, um momento de grande excitação na comunidade acadêmica brasileira foi provocado pela publicação da lista dos 56 cursos depôs-graduação que obtiveram o pior conceito (nota E), na avaliação da Capes. Esse vazamento para O Estado de São Paulo, um dos mais tradicionais e respeitados jornais do Brasil, culminou um debate que obteve considerável espaço e cores vivas na imprensa A divulgação oficial, pela, Capes, da lista dos melhores cursos (nível A) havia iniciado uma polêmica que extravasou os circunspectos muros acadêmicos. Em seguida, a revistaPlayboy, em artigo sobre a qualidade do ensino, referiu-se, reiteradamente às avaliações da Capes. Mas foi com as entrevistas ,dos indignados e vociferantes responsáveis pelos cursos considerados "sem condições .-mínimas de funcionamento" que a controvérsia atingiu o seu clímax. Alguns chegaram Jl pensar que, estaria ameaçado o sistema de avaliaçlo e as suas conseqüências como mecanismo de si.,alização para o apoio fmanceiro âpõs-graduação, ' , Não obstante, tal teste perante o grande público serviu para consolidar a sua legitímídade junto àsagências financiadoras do sistema decíêncía e tecnologia bem como perante a comunidade acadêmica. Confirmou-se, assim, a estabilidade e a robustez de um ambicioso sistema de avalíação da pós-graduação brasíleíra. É de se notar que tais incidentes coincidiram com o fínal da implementação, na Capes, de uma série de mecanismos que vinculavam os auxílios a uma boa nota na avaliação. Mais ainda, foram criados dispositivos que condicionaram o auxílio aos bons cursos ao compromisso, das universidades, de definir uma política realista para os seus cursos mais fracos, em outros departamentos.Devido à sua importância prática, o sistema de avaliação da Capes passou a merecer a atenção de um públí-co mais amplo. Este artigo é uma tentativa de descrever esse sistema, bem como de apresentar uma série de exercícios estatísticos que buscam explorar a fidedignidade dos conceitos atribuídos por ele} O .sistema de avaliação abrange todos os cursos de mestrado e doutorado. A dimensão da pós-graduação brasileira, com cerca de mil cursos, oferece um desafio e, ao mesmo tempo, possibilidades de análise quantitativa inexistentes em sistemas menores.Desde 1977, os comitês da Capes vêm avaliarido cada um dos cursos de mestrado e doutorado que operam ' no Brasikatríbuíndo a cada um deles uma nota ou conceito. Para:lelamente ao crescimento quantitativo da pós-graduação, os mecanismos de avalíação vêm aumentando a sua abrangência, tornando-se mais complexos e cobrindo um número mais amplo de dimensões ou critérios.

Configuração do campo da avaliação educacional na década de 1980 no Brasil

“…2020 aplicação dos instrumentos de seleção (CASTRO, 1982;GATTI, 1987;VIANNA, 1980b;1986a;. Na avaliação da pesquisa e da pós-graduação os avaliadores são os próprios funcionários das agências e os renomados especialistas da comunidade acadêmica (SCHWARTZMAN, 1982;SOUZA, 1984;SOARES, 1983), defendendo-se, em alguns momentos, que os responsáveis pela avaliação fossem aqueles que vivem o cotidiano da universidade (SAUL, TESSER;SÁ, 1987;SAUL, 1988a).…”

“…O aparecimento de novos instrumentos e técnicas de avaliação trouxe consigo a preocupação com a validade dos instrumentos de medida, que precisam, por sua vez, obedecer à metodologia científica (VIANNA, 1983;. A respeito do processo de avaliação da pós-graduação brasileira, os mecanismos utilizados para a obtenção das informações levam à construção dos indicadores de produção e à avaliação final dos cursos (CASTRO; SOARES, 1983;, podendo essa avaliação seguir outros procedimentos como o que considera a avaliação por pares, a independência das autoridades educacionais e a utilização de informações objetivas e quantitativas (SCHWARTZMAN, 1988) ou como o que define quatro fases ou momentos para a avaliação da pós-graduação em educação (SAUL et al, 1987). Quanto aos aspectos metodológicos provenientes da avaliação do rendimento escolar dos alunos são descritos os procedimentos adotados em estudos de caso em que se analisou a avaliação do Programa de Expansão e Melhoria do Ensino Rural (BARRETO, 1983) e o Projeto Logos II (ANDRÉ; CANDAU, 1984).…”

Quem não conhece seu passado está condenado a repeti-lo: distorções da avaliação da pós-graduação no Brasil à luz da história da Capes

“…Although this was a period of stability, there was a moment of agitation in the Brazilian academic community due to the publication of the list of 56 Post-Graduation programs that had been given the worst possible grade in Capes' evaluation. This information was at the time printed at the Estado de São Paulo newspaper and led to a debate that got considerable attention from the press (CASTRO and SOARES, 1983). That led universities to display their programs' grade.…”

The research productivity of new Brazilian PhDs in management

“…In Brazil, the institutional system that oversees research in doctoral programs is established by the agency CAPES (Castro and Soares, 1983; Shigaki and Patrus, 2013; Maccari and Nishimura, 2014). In 1951, the Brazilian government created CAPES this agency to provide training of specialized personnel, in quantity and quality, needed for the development of the country (Shigaki and Patrus, 2013).…”