Workplace Based Assessment in Obstetrics and Gynecology Clerkship to Detect Learning Gaps
Avaliação Baseada em Cenários de Prática para Detectar Lacunas de Aprendizagem no Internato Médico em Ginecologia e Obstetrícia
Rev. bras. educ. méd; 43 (1), 2019
Publication year: 2019
ABSTRACT Background An outcome-based curriculum helps to communicate expectations of performance to students and clinical teachers. The Mini Clinical Evaluation Exercise (mini-CEX) is a useful tool for workplace-based formative assessment. The objective of this study was to use workplace-based assessment and student feedback to evaluate an Obstetrics and Gynecology (Ob&Gyn) clerkship curriculum. Methods A cross-sectional study was conducted with faculty members and medical students in an Ob&Gyn clerkship. The Mini-CEX was introduced into the clerkship assessment system, together with multiple choice question (MCQ) tests. This tool evaluates the history collection, physical examination, clinical judgment, professionalism and humanism, and also gives an overall score at the end of the test. At the end of the rotation, questionnaires were used to collect the students' perceptions about their skills acquisition during the program. The results of the Mini-CEX, the MCQ test, and questionnaire responses were compared, to determine the extent to which learning objectives were achieved. Results three faculty members assessed 84 medical students using the mini-CEX during the four-month clerkship. The scores for the physical examination and clinical judgment skills were lower, compared to those of the interviewing skills. Based on the students' feedback, ratings for physical examination and counseling preparation were rated as "inadequate", especially for the topic breaking bad news. The bivariate correlation between the mini-CEX skills and MCQ test scores showed a positive relationship (r = 0.27). Although they assess different skills on the Muller pyramid, there appears to be a relationship between "Knowing" and "Doing". These findings will help curriculum managers to identify important gaps in the rotation design and delivery. Based on these results, training in the skills workshop during the first month of the rotation was initiated, in addition to previous simulated training during the third year of medical course. Conclusions The introduction of the mini-CEX offers critical information to identify and refine important curriculum elements in the clinical years. Based on this, physical examination and communications skills training were initiated in the skills workshop.
RESUMO Contexto Currículo Baseado em Desfechos ajuda a comunicar as expectativas de desempenho entre alunos e professores. O Miniexercício de Avaliação Clínica (Miniex) é uma ferramenta útil para avaliação formativa no local de trabalho. O objetivo deste estudo foi usar avaliação em cenários reais de prática e feedback dos alunos para qualificar um programa de internato médico em Ginecologia e Obstetrícia (GO). Métodos Foi realizado um estudo transversal com docentes e estudantes do internato médico em GO. O Miniex foi introduzido no sistema de avaliação de estágio adicionado a testes de perguntas de múltipla escolha (MCQ). Esta ferramenta avalia a coleta de histórico, o exame físico, o julgamento clínico, o profissionalismo e o humanismo, além da escala global no final do teste. No final da rotação de quatro meses, questionários foram aplicados para coletar a percepção do aluno sobre a aquisição de habilidades durante o programa. Os resultados do Miniex, o teste de MCQ e as respostas aos questionários foram comparados para determinar a medida em que os objetivos de aprendizagem foram alcançados. Resultados Três docentes avaliaram 84 estudantes de Medicina usando Miniex ao longo do estágio de quatro meses. As pontuações médias para exame físico e habilidades de julgamento clínico foram menores em comparação com as habilidades de anamnese e aconselhamento. Com base na percepção dos alunos, o preparo para exame físico e o aconselhamento foram classificados como "inadequados", especialmente quanto à divulgação de más notícias. A correlação bivariada entre as habilidades do Miniex e os escores do teste MCQ mostrou uma relação positiva (r = 0,27). Apesar de avaliar as diferentes habilidades da pirâmide de Muller, parece haver uma relação entre "knows" e "does". Essas descobertas ajudaram os coordenadores de internato e docentes a identificar lacunas importantes no programa do estágio. Com base nesses resultados, foi iniciado um treinamento no laboratório de habilidades durante o primeiro mês de rotação para todos os alunos ingressantes, adicionado ao treinamento simulado anterior durante o terceiro ano do curso de Medicina. Conclusões A introdução do Miniex oferece informações críticas para identificar e aprimorar elementos curriculares importantes nos anos clínicos.