Criando Perguntas de Múltipla Escolha: Objetivos, Estrutura e Características, Notas de estudo de Medicina

Baixe Criando Perguntas de Múltipla Escolha: Objetivos, Estrutura e Características e outras Notas de estudo em PDF para Medicina, somente na Docsity!

Uma boa questão de múltipla

escolha

Resumo baseado em manuais do Teste de

Progresso (ABEM), Revalida e ANASEM (INEP)

Fabricio Neves – Novembro/

1) Pense nos objetivos

• Seu aluno está num curso de graduação. Vai se formar

médico.

• O que ele precisará saber de seu conteúdo para a futura vida

profissional? Sua prova deveria se basear, principalmente,

nestes objetivos.

• Converse sobre isso com seu coordenador de fase, presidente

do NDE, coordenador do curso, entre outros. Converse

periodicamente e de espírito aberto (porque os objetivos

podem mudar com o tempo)

• Esses objetivos formarão a “matriz” da sua prova – uma lista

de objetivos que o ajudará a compor os temas das questões

de sua prova.

Exemplo

Você é professor universitário no

curso de graduação em medicina

da Universidade Federal de Santa

Catarina. Está elaborando uma

questão de múltipla escolha de

seu conteúdo para uma prova

global do terceiro ano (quinto

semestre) que terá um total de 20

questões. Qual o número de

alternativas de resposta você deve

elaborar?

Situação-

problema

Enunciado

Características de “situações clínicas”

• A situação clínica (ou “vinheta”) contextualiza uma situação em que

o conhecimento da resposta daquela questão é necessário. Demonstra a necessidade daquele conhecimento. É desejável no curso de medicina, mas não é sempre obrigatória.

• Uma boa situação clínica é curta e precisa, contendo apenas os

elementos necessários para servir de base para o enunciado.

• Nem sempre a situação clínica é indispensável para uma questão

que exija apenas memorização. Nossa questão exemplo poderia ser refeita e medir o mesmo conhecimento do aluno:

Quando a situação clínica é

indispensável

• Quando o professor deseja avaliar em uma questão de múltipla escolha a capacidade de compreensão e interpretação de dados do aluno. Diagnósticos e tomadas de decisão baseada em diagnósticos são exemplos de objetivos que exigem uma situação clínica para funcionarem em uma questão de múltipla escolha. Exemplo:

Você é o médico de plantão no serviço de emergência do Hospital

Universitário da UFSC. Dá entrada o Sr. A, 50 anos, que apresenta há 2

horas perda de força do hemicorpo esquerdo e afasia, de instalação

súbita.

O exame de imagem a ser obtido para definição da conduta terapêutica

na emergência é:

Situação-

problema

Enunciado

Nessa questão é necessário interpretar a situação clínica e diagnosticar um caso

típico de provável acidente vascular encefálico. Somente após este diagnóstico o

aluno vai acionar a memorização e responder qual o exame indicado neste caso.

Características do “enunciado”

• Geralmente é uma pergunta (termina com ponto de interrogação)

ou uma frase incompleta. As alternativas são respostas possíveis à pergunta ou textos que poderiam completar o enunciado. Ou seja, o enunciado e as alternativas devem “se casar” bem.

• Evitar no enunciado:
  • Enunciados negativos, que pedem a resposta incorreta (nosso objetivo é verificar se o aluno sabe resolver corretamente uma situação, e inverter o raciocínio é uma maneira de confundir, e não de medir conhecimento)
  • Enunciados com pistas gramaticais para a resposta correta. Exemplo: “O exame de imagem a ser solicitado é a...” ( a resposta correta só poderá ser uma palavra feminina)
  • Enunciados que pareçam pedir opiniões pessoais. Exemplo: “Sua conduta seria...” (dá margem a interpretações inesperadas do texto)

Exemplo

Para a intubação orotraqueal do paciente sedado posicionado

em decúbito dorsal, sob que região deve ser colocado um apoio

(coxim)?

a ( ) Occipital

b ( ) Cervical

c ( ) Dorsal

d ( ) Lombar

Alternativas.

As alternativas nessa questão são variações possíveis de escolha de um local para colocação de apoio para intubação. Apenas o conhecimento técnico permite identificar a alternativa correta, não há uma alternativa que possa ser eliminada por ser implausível, nem uma alternativa “suspeita” de ser certa ou errada por destoar das demais por lógica de exclusão/associação simples. Caso fossem frases curtas em vez de apenas uma palavra, como neste exemplo, deveriam ter extensão e estrutura semelhantes.

Referencie sua resposta

• Baseado nas referências bibliográficas do Projeto Pedagógico do curso, que devem ser condizentes com o Plano de Ensino do seu conteúdo (se não forem, está faltando comunicação com a coordenadoria do curso), a resposta à sua questão deve ser facilmente sustentada.
• Evitar as questões cujas resposta estejam limitadas a “notas de rodapé”, isto é, fora da linha geral de raciocínio dos textos usados, ou que sejam exemplos muito incomuns de situações gerais.
• Evitar construir questões cuja resposta correta se baseie em dados numéricos de pequena relevância. Exemplo: a frequência de recidiva de certo tumor após cirurgia é 20% / 25% / 30% ou 35% (provavelmente podem ser encontradas referências diferentes com sobreposição destes valores, causando controvérsia).
• Evitar construir questões cuja resposta correta privilegie abordagens ou teorias específicas quando há controvérsia no meio acadêmico ou social sobre diferentes alternativas potencialmente válidas como corretas (isto é, aquelas alternativas opostas que encontram igualmente textos e autores que a defendam com argumentos e dados sólidos, impossibilitando a definição de uma “única alternativa correta”). Pode gerar debate, mas não é boa questão de prova.

Exemplo final:

Você é professor universitário no curso de graduação em medicina da Universidade Federal de Santa Catarina. Está elaborando uma questão de múltipla escolha de seu conteúdo para uma prova global do terceiro ano (quinto semestre) que terá um total de 20 questões. Qual o número de alternativas de resposta você deve elaborar? A ( ) 3 B ( ) 4 C ( ) 5 D ( ) 6

Gabarito: B A probabilidade de alcançar 70% de acerto por acaso em uma prova de 20 questões com quatro alternativas é de 1 em 33 mil. A probabilidade de alcançar 60% de acerto, que é a nota de aprovação na UFSC pode ser calculada como cerca de 1 em mil. Mesmo numa prova de 10 questões, essa chance continua baixa (cerca de 1 em 200, menor que 0,5%). No seminário dos professores de 2016, definiu-se que 4 alternativas são suficientes para a maioria das situações que exijam questões de múltipla escolha no Curso de Medicina, e que a elaboração de uma quinta alternativa geralmente resulta em resposta implausível ou inadequada que não aumenta o poder de discriminação da questão (Ref: NDE do Curso de Medicina: Construindo questões de múltipla escolha – disponível em www.medicina.ufsc.br).

Professores que se julgarem prejudicados ao errarem a questão “Exemplo Final” podem pedir revisão da prova nos termos da Resolução 17/97 e do Regimento do Curso de Medicina!

Estamos brincando, naturalmente.

Obrigado a todos os que leram este resumo e que estão buscando se aprimorar na tarefa de ensinar e avaliar, em que somos todos aprendizes também.

Acredito que todos podemos nos ajudar estudando assuntos relacionados a didática e compartilhando com os colegas, coordenadores de fase, NDE e coordenadoria de curso.

Abraço a todos.

Fabricio Neves