Progress test utopia

Vleuten, Cees van der; Freeman, Adrian; Collares, Carlos Fernando

doi:10.1007/s40037-018-0413-1

Cited by 25 publications

(16 citation statements)

References 15 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Com relação à prova nacional, esta foi a maior versão de um Teste de Progresso já aplicada em todo o mundo de que se tem registro na literatura. De fato, os consórcios existentes na Holanda, Alemanha, Reino Unido, Estados Unidos e Canadá não contam com a participação de um número tão grande de escolas e de estudantes 6,7,16,17 . Para a operacionalização do Teste de Progresso de forma constante e regular, não é viável o número de 58 escolas, especialmente se o teste for aplicado várias vezes ao ano, como ocorre na experiência internacional 18 .…”

Section: Discussionunclassified

Teste de Progresso em Consórcios para Todas as Escolas Médicas do Brasil

Bicudo

Filho

Abbade

et al. 2019

Rev. bras. educ. med.

View full text Add to dashboard Cite

RESUMO O Teste de Progresso é uma ferramenta de avaliação longitudinal do ganho de conhecimento de estudantes que tem sido aplicada no Brasil há mais de dez anos. O teste situa o estudante em seu processo evolutivo de ensino-aprendizagem e permite à instituição realizar o diagnóstico de suas deficiências ao longo da estrutura curricular. Ele pode ser utilizado pelos colegiados competentes para avaliação de alterações curriculares e avaliações específicas de disciplinas ou módulos de ensino. Com base na experiência de um consórcio de escolas, a Associação Brasileira de Educação Médica (Abem) propôs um projeto que tinha como um de seus objetivos incentivar escolas de todo o País a adotarem o Teste de Progresso como uma de suas ferramentas de avaliação. Reportamos a estratégia adotada para constituir núcleos interinstitucionais de avaliação com Teste de Progresso, bem como os resultados da primeira prova nacional do Teste de Progresso, que contou com a participação de 58 escolas e 23.065 estudantes. A implantação de núcleos interinstitucionais de Teste do Progresso com processos colaborativos de realização da prova representou um avanço para as escolas envolvidas. As escolas iniciaram um processo de colaboração não apenas para o Teste de Progresso, mas também para o intercâmbio de informações e experiências que trocam com base no conhecimento de cada uma. O projeto funcionou como o início de um movimento para que escolas médicas de todas as regiões do País adotem o Teste de Progresso como uma ferramenta de avaliação com potencial para reorientar a formação médica, ao fornecer um diagnóstico de formação em nível individual e institucional.

show abstract

Section: Discussionunclassified

Teste de Progresso em Consórcios para Todas as Escolas Médicas do Brasil

Bicudo

Filho

Abbade

et al. 2019

Rev. bras. educ. med.

View full text Add to dashboard Cite

show abstract

“…Item response models allowed the estimation of the so-called “true scores” of test takers. Furthermore, item response theory also enabled the use of computerized adaptive testing, a technology that allows the dynamic selection of test items according to the ability of the test taker (Collares & Cecilio-Fernandes, 2019 ), and its application in progress testing (van der Vleuten et al, 2018 ).…”

Section: Why Do We Need a New Psychometric Paradigm?mentioning

confidence: 99%

Cognitive diagnostic modelling in healthcare professions education: an eye-opener

Collares

2022

Adv in Health Sci Educ

Self Cite

View full text Add to dashboard Cite

Criticisms about psychometric paradigms currently used in healthcare professions education include claims of reductionism, objectification, and poor compliance with assumptions. Nevertheless, perhaps the most crucial criticism comes from learners' difficulty in interpreting and making meaningful use of summative scores and the potentially detrimental impact these scores have on learners. The term "post-psychometric era" has become popular, despite persisting calls for the sensible use of modern psychometrics. In recent years, cognitive diagnostic modelling has emerged as a new psychometric paradigm capable of providing meaningful diagnostic feedback. Cognitive diagnostic modelling allows the classification of examinees in multiple cognitive attributes. This measurement is obtained by modelling these attributes as categorical, discrete latent variables. Furthermore, items can reflect more than one latent variable simultaneously. The interactions between latent variables can be modelled with flexibility, allowing a unique perspective on complex cognitive processes. These characteristic features of cognitive diagnostic modelling enable diagnostic classification over a large number of constructs of interest, preventing the necessity of providing numerical scores as feedback to test takers. This paper provides an overview of cognitive diagnostic modelling, including an introduction to its foundations and illustrating potential applications, to help teachers be involved in developing and evaluating assessment tools used in healthcare professions education. Cognitive diagnosis may represent a revolutionary new psychometric paradigm, overcoming the known limitations found in frequently used psychometric approaches, offering the possibility of robust qualitative feedback and better alignment with competency-based curricula and modern programmatic assessment frameworks.

show abstract

“…O Teste do Progresso (TP) é uma avaliação de conhecimento abrangente, relacionado aos objetivos de final de curso que acompanha a trajetória de aprendizagem do estudante ao longo da sua formação. Diferentemente das avaliações modulares existentes no currículo, que geram um coeficiente médio ao final do curso, acredita-se que o aspecto longitudinal do TP e com repetições, tendo um vasto conteúdo, desencoraja o estudo de memorização para o teste, estimulando uma aprendizagem mais profunda [1][2][3][4] .…”

Section: Introductionunclassified

“…O teste de progresso é aplicado em um mesmo momento a todos os estudantes sendo a confiabilidade mais relacionada ao aumento da frequência de aplicações que ao aumento no número de questões 10 . Tem um aspecto predominantemente formativo onde o feedback dirige a aprendizagem e orienta no acompanhamento do currículo [1][2][3] .…”

Section: Introductionunclassified

“…Essa informação é importante também para as escolas aprimorarem o currículo, identificarem e auxiliarem precocemente estudantes com desempenho mais baixo. O teste de progresso pode ainda ser a avaliação principal do curso, com aspecto somativo, sendo sugerida a sua utilização para definição não só de acompanhamento, mas de progressão e aprovação 2,3,9 .…”

Section: Introductionunclassified

See 1 more Smart Citation

Desempenho no teste do progresso e coeficiente de rendimento final de curso são preditores de aprovação na residência médica?

Guaraná

Duque

Lima

2022

Medicina (Ribeirão Preto)

View full text Add to dashboard Cite

Introdução: O teste do progresso (TP) é uma avaliação longitudinal e com conteúdo de final de curso cujo objetivo é acompanhar o ganho de desempenho dos estudantes e auxiliar na gestão de currículo. O papel preditivo do TP nos processos seletivos ao final do curso de Medicina vem sendo estudado com grande interesse. Objetivo: Avaliar a associação do desempenho longitudinal dos estudantes de medicina no TP em um período de seis anos e do coeficiente de rendimento final no curso com a aprovação na seleção para Residência Médica (RM). Método: Estudo longitudinal desenvolvido na Faculdade Pernambucana de Saúde (FPS), onde foram acompanhadas as trajetórias de estudantes de medicina que concluíram o curso nos anos de 2018 e 2019 em relação ao desempenho no TP e coeficiente de rendimento final. Os dados foram extraídos da base de dados do registro acadêmico da FPS no sistema Lyceum. As informações sobre a realização e resultado no processo seletivo de RM foram obtidas no site da instituição organizadora. Para análise bivariada foi usado o teste Qui-quadrado de Pearson e o Teste exato de Fisher quando aplicado e foi utilizado teste T para comparação de médias. Foi considerado o nível de significância de 95%. Resultados: Foram avaliados 293 estudantes respeitando-se os critérios de inclusão/exclusão. A média de idade foi de 26,36 (±3,29) anos e com predomínio do sexo feminino (76%). Observou-se que 96 (33%) estudantes optaram por não ingressar imediatamente ao término do curso em programa de RM, e este comportamento esteve mais associado com a média de idade mais elevada no momento da conclusão do curso (p=0,02). Observou-se associação entre a média do TP e aprovação na RM (p<0,001), não sendo observada essa associação com o coeficiente de rendimento final (p=0,71). Conclusão: Este estudo mostrou associação entre o desempenho no TP ao longo dos seis anos do curso de Medicina e aprovação na prova de RM. Tal associação não foi identificada com o coeficiente de rendimento geral do curso. Destacamos a importância de atribuir motivação à realização do TP com cada vez mais destaque a sua função formativa e primordial no processo de aprendizagem.

show abstract

Progress test utopia

Cited by 25 publications

References 15 publications

Teste de Progresso em Consórcios para Todas as Escolas Médicas do Brasil

Teste de Progresso em Consórcios para Todas as Escolas Médicas do Brasil

Cognitive diagnostic modelling in healthcare professions education: an eye-opener

Desempenho no teste do progresso e coeficiente de rendimento final de curso são preditores de aprovação na residência médica?

Contact Info

Product

Resources

About