Exposição e reutilização de itens em provas de Medicina

Reutilizar uma questão de Medicina exige saber quem teve acesso ao item, com que finalidade e em quais condições ele será aplicado novamente. Repetir um item para praticar e discutir um erro pode ser uma escolha pedagógica. Reapresentá-lo como evidência independente de aprendizagem, depois de divulgar a resposta, exige outra interpretação.

A decisão precisa combinar conteúdo, histórico de exposição e finalidade da prova. Não existe um número universal de utilizações que, sozinho, determine retirada do item. Este guia propõe um registro de ciclo de vida, exemplifica duas aplicações e mostra como decidir entre reutilizar, revisar, reservar e retirar sem atribuir automaticamente uma melhora a fraude.

O que a pesquisa permite dizer sobre reuso de questões?

Um estudo exploratório de Joncas e colaboradores analisou 1.629 questões de 16 unidades ao longo de cinco anos, em uma graduação médica canadense. O uso repetido esteve associado a maior proporção de acertos e menor discriminação entre estudantes. Os autores discutem riscos do reuso em intervalos curtos. Estudo original, 2018.

O desenho descritivo não estabelece que todo aumento decorra de compartilhamento indevido, nem fornece um limite obrigatório para qualquer banco. O resultado convida a examinar exposição e condições de aplicação antes de tratar questões reutilizadas como equivalentes a material reservado. Transferir um achado de uma instituição a outra pede cuidado com público, currículo e desenho da avaliação.

Há também uma diferença entre qualidade de conteúdo e comportamento estatístico. Um item pode continuar correto e útil para ensinar, mas deixar de servir ao mesmo propósito de uma avaliação protegida após sua divulgação. Retirá-lo de uma prova somativa não significa apagar sua utilidade pedagógica.

Qual é a diferença entre treino e avaliação para decisão?

No treino, o estudante pode responder, receber explicação, revisar o raciocínio e tentar outra vez. O reaproveitamento deliberado ajuda o professor a discutir a mesma tarefa em momentos diferentes. A melhora na questão treinada informa o que aconteceu com aquela tarefa; para investigar transferência, apresente outra situação que exija aplicar o princípio sem reproduzir os mesmos sinais.

Em uma prova usada para decisão acadêmica, a equipe precisa conhecer o acesso prévio ao material e o que pretende inferir da resposta. Se uma turma recebeu o gabarito comentado e outra não, a oportunidade de preparação mudou. Essa diferença deve ser documentada antes de comparar os resultados como se as condições fossem iguais.

A política de devolutiva pode combinar questões abertas para discussão com itens reservados para aplicações futuras, desde que isso esteja coerente com as regras institucionais. A reserva não deve eliminar o direito a uma devolutiva pedagógica útil. Explique os objetivos avaliados, as dificuldades identificadas e como estudar, mesmo quando não se disponibiliza todo o material de uma prova protegida.

As regras do NBME proíbem divulgação e reconstrução não autorizadas dos materiais de seus exames. Essa é uma política daquele examinador. A faculdade brasileira precisa estabelecer sua própria política, compatível com suas regras acadêmicas e com os direitos dos participantes, sem apresentar a política estrangeira como obrigação local.

O que registrar no ciclo de vida de um item?

A unidade de registro deve ser o item em uma versão identificada. Um código sem histórico de alterações pode juntar dados de perguntas diferentes. Mudanças no comando, nas alternativas, nas imagens ou no gabarito precisam ficar visíveis, pois podem mudar a tarefa que o estudante realiza.

Também registre como o item circulou. “Aplicado uma vez” não informa se foi discutido em aula, incluído em material aberto ou liberado com gabarito. A exposição deve ser descrita como fato conhecido, com fonte e data, preservando a diferença entre acesso documentado e suspeita ainda não esclarecida.

O registro é uma proposta editorial, não uma ficha exigida pelo Inep nem a descrição de um recurso automático do SPR Med. Pode ser mantido em um banco institucional ou em ferramenta aprovada pela faculdade. A ferramenta precisa permitir localizar o item e a decisão sem expor a estudantes os materiais reservados.

Como interpretar duas aplicações do mesmo item?

No cenário sintético, 22 de 40 respostas foram corretas na primeira aplicação: 55%. Após a discussão do item, foram 31 de 38: 81,6%, com arredondamento a uma casa decimal. A diferença é de 26,6 pontos percentuais. Os valores demonstram o cálculo; não descrevem estudantes ou resultados do SPR Med.

A segunda aplicação não tinha a mesma finalidade da primeira, e os denominadores também mudaram. O resultado é compatível com mais estudantes respondendo corretamente à tarefa repetida. Não permite quantificar, isoladamente, um ganho geral na área, concluir melhora na nota do ENAMED ou identificar o efeito específico da discussão realizada.

Para estudar a evolução de cada estudante, identifique o conjunto que participou das duas aplicações. Comparar 22/40 com 31/38 mistura respostas pareadas e ausências, e não substitui essa análise. Descreva também intervalo, ensino ocorrido, consulta permitida e mudanças no conteúdo.

Uma atividade seguinte pode usar outro item, com situação e sinais diferentes, que examine a aplicação do mesmo princípio. Antes de interpretar seu resultado como transferência, o professor deve revisar se a tarefa é de fato comparável e se a exigência mudou. Trocar nomes, números ou a posição das alternativas não demonstra equivalência de dificuldade.

Quando reutilizar, revisar, reservar ou retirar?

Reutilize quando a finalidade admite repetição e essa exposição fica explícita na leitura. Revise quando há um problema corrigível de conteúdo, redação ou atualização. Reserve quando a política institucional pede proteção para uma aplicação futura. Retire de uma finalidade quando o item não sustenta mais a interpretação pretendida, preservando o histórico.

Um índice de acertos elevado não comprova defeito ou fraude. A análise pode encontrar um item fácil por adequação ao objetivo, aprendizagem relevante, um gabarito exposto ou uma falha de transcrição. São hipóteses diferentes. O processo deve buscar evidências e permitir esclarecimento, sem acusar participantes com base apenas na nota.

O guia de elaboração e revisão de itens ajuda a tratar problemas de redação. A montagem do caderno acrescenta a verificação de cobertura e dependência entre questões. Uma troca para reduzir exposição não pode criar, silenciosamente, uma lacuna no objetivo avaliado.

Como usar estatísticas e registros sem prometer controles inexistentes?

Percentual de acertos é uma descrição das respostas obtidas. Discriminação é uma análise do comportamento do item em relação ao desempenho no conjunto considerado. Esses indicadores precisam ser identificados por versão e população, com o tamanho da amostra e as condições em que foram calculados. Um rótulo simples de “fácil” não documenta todo esse histórico.

No contexto do ENAMED 2025, a Nota Técnica Inep 42/2025 descreve o modelo de Rasch. Seu parâmetro de item é a dificuldade; uma estatística empírica de discriminação não passa a ser um parâmetro livre desse modelo. Também não se deve juntar estatísticas de versões alteradas como se viessem do mesmo item sem justificar o procedimento.

Na contratação de uma ferramenta, peça demonstração de quais históricos podem ser consultados e exportados: aplicações, versões, respostas, divulgação e permissões. A existência de banco de questões ou montador de prova não comprova, por si só, controle automático de exposição, detecção de fraude ou equivalência entre questões variantes.

No SPR Med, os recursos e os registros disponíveis para aquele fluxo devem ser confirmados na demonstração e no escopo contratado. A ficha deste artigo permanece útil como critério de avaliação, mesmo quando parte do controle é organizada pela faculdade. O registro de responsáveis e evidências do ciclo ajuda a manter essa divisão clara.

Para discutir a seleção de itens e o histórico necessário na sua instituição, converse com os fundadores. Leve uma prova atual e exemplos de como a equipe registra suas aplicações.

Perguntas frequentes

Quantas vezes uma questão de Medicina pode ser reutilizada?

Não há limite universal sustentado pelas fontes aqui citadas. A decisão considera finalidade, exposição, versões, público e comportamento do item; não deve depender apenas de um contador de usos.

Melhorar em uma questão repetida comprova aprendizagem?

Mostra uma mudança nas respostas àquela tarefa, sob as condições registradas. Uma conclusão mais ampla precisa de outras evidências, incluindo tarefas que exijam aplicar o conhecimento em situações diferentes.

Toda questão divulgada precisa ser apagada do banco?

Não. Ela pode continuar útil para ensino e treino. O registro deve indicar sua exposição e as finalidades em que seu uso continua adequado.

Aumento de acertos significa que houve fraude?

Não. Ensino, estudo, composição da turma, condições de prova e exposição autorizada também precisam ser examinados. Uma acusação exige apuração própria, com evidências e procedimentos institucionais.

Alterar os números do caso torna a questão equivalente e protegida?

A alteração cria uma versão que precisa ser revisada. Ela não demonstra, sozinha, equivalência psicométrica nem elimina a possibilidade de reconhecimento da tarefa.

Fontes e escopo

O estudo de Joncas e colaboradores, 2018 é exploratório e descritivo, realizado em uma instituição, e não valida uma política universal de reuso. As regras do NBME pertencem aos exames daquela organização. Os registros, números e decisões apresentados nas tabelas são sintéticos e constituem uma proposta de organização local. O autor é cofundador do SPR Med; o texto não apresenta estudo de eficácia do produto.