Como Saber se o Simulado da Sua IES Antecipa a Prova Real: 5 Critérios

A maioria dos simulados de medicina no Brasil mede memorização de conteúdo, não proficiência ancorada na Matriz de Referência Comum do INEP. Para saber se o simulado da sua IES realmente antecipa a prova real, a coordenação precisa avaliar cinco critérios objetivos: aderência de blueprint às 7 dimensões da Portaria INEP 478/2025, calibração TRI real item a item, validação externa contra prova publicada, predição de temas com backtest auditável e volume vivo de respostas que recalibra a régua continuamente. Nenhum desses critérios é opinativo: todos podem ser exigidos em número, em portaria e em auditoria.

Este artigo detalha cada critério com o rigor que um NDE, uma CPA ou uma direção acadêmica precisam para decidir entre manter um fornecedor de simulados, trocar de metodologia ou internalizar mal a avaliação formativa. O pano de fundo é regulatório: com 107 cursos em conceito 1 ou 2 no ENAMED 2025 e 99 cursos sob supervisão do MEC pelas Portarias 72, 73 e 74 de 17 de março de 2026 (Fonte: Seres/MEC, 2026), a escolha do instrumento de simulado deixou de ser uma questão pedagógica menor e passou a ser uma decisão de governança institucional com impacto direto em vagas, conceito e reputação.

Por que a maioria dos simulados não antecipa a prova real?

Simulados tradicionais reproduzem a lógica das provas de progresso antigas: bancos de questões organizados por área de conhecimento (Clínica Médica, Cirurgia, Pediatria, Ginecologia e Obstetrícia, Medicina de Família e Comunidade, Saúde Coletiva, Saúde Mental), sem tagueamento fino de competências, domínios, eixos, cenários e níveis cognitivos. Essa lógica funcionava razoavelmente bem quando a referência era o ENADE, mas deixou de ser suficiente com a Portaria INEP 478/2025, que estruturou a Matriz de Referência Comum em 15 competências, 21 domínios, 7 áreas de formação, 6 cenários de prática, 3 eixos e 3 níveis cognitivos (Portaria INEP 478/2025).

Um simulado que distribui questões apenas pelas 7 áreas de formação está replicando uma fração pequena da matriz real. É como calibrar um instrumento de medição em uma única dimensão quando o fenômeno medido tem sete. O resultado prático aparece nos números do ENAMED 2025: de 89.024 participantes e 39.258 concluintes, apenas 67% foram classificados como proficientes, com cerca de 13 mil egressos abaixo do corte mínimo (Fonte: INEP, 2025). Cursos que usavam simulados rasos, organizados só por área, tiveram taxas de proficiência substancialmente abaixo da média nacional, porque o instrumento de preparo não espelhava a estrutura real da avaliação.

O problema se agrava quando a IES converte o simulado em ferramenta de diagnóstico de conceito. Um instrumento sem aderência à matriz completa gera uma falsa sensação de segurança: a nota do simulado sobe, mas a nota real no ENAMED não acompanha, porque o simulado mediu a dimensão errada. É o mesmo erro metodológico que levou 107 cursos a conceito 1 ou 2 em 2025, muitos dos quais confiavam em instrumentos internos de avaliação que nunca foram confrontados com a prova real (Fonte: INEP, 2025).

Leia tambémA Nova Régua da Formação Médica →

Quanto custa um simulado que não antecipa a prova real?

O custo não é apenas pedagógico: é regulatório e financeiro, com efeito direto sobre vagas e sobre o Conceito Enade Medicina. As faixas de proficientes que definem o conceito são públicas e objetivas: conceito 1 corresponde a até 39,9% de proficientes, conceito 2 vai de 40% a 59,9%, conceito 3 de 60% a 74,9%, conceito 4 de 75% a 89,9% e conceito 5 exige 90% ou mais (Fonte: INEP, 2025). Um curso que opera hoje com aproximadamente 55% de proficientes está a poucos pontos percentuais de cair de conceito 3 para conceito 2, e a diferença entre essas duas faixas pode significar a diferença entre operação normal e supervisão do MEC.

As Portarias 72, 73 e 74 de 17 de março de 2026 tornaram essa consequência concreta: 99 cursos entraram sob supervisão da Seres/MEC, sendo 8 com suspensão de ingresso, 13 com corte de 50% das vagas, 33 com corte de 25% e 45 impedidos de ampliar vagas (Fonte: Seres/MEC, 2026). Com a MP 1.370/2026, esse mecanismo de supervisão passou a valer para todos os cursos, e o desempenho insatisfatório na 2ª etapa do ENAMED (a etapa que funciona como gate de registro no CRM para quem ingressar a partir de 19 de junho de 2026) aciona supervisão institucional independentemente do momento em que o aluno ingressou. Ou seja: mesmo cursos com turmas anteriores à MP sentem o peso regulatório do desempenho coletivo no exame.

A tabela abaixo resume o vínculo entre proficiência, conceito e risco regulatório, que deveria ser a referência de qualquer coordenação ao avaliar se seu simulado atual está de fato blindando o curso.

Conceito	Faixa de proficientes	Consequência regulatória típica
1	Até 39,9%	Suspensão de ingresso, supervisão intensiva
2	40% a 59,9%	Corte de vagas (25% a 50%), supervisão
3	60% a 74,9%	Zona de atenção, sem sanção automática
4	75% a 89,9%	Conceito seguro, elegível a expansão
5	90% ou mais	Conceito de excelência (84% dos conceitos 5 em 2025 eram públicos)

Diante desse quadro, um simulado que não antecipa a prova real não é apenas uma ferramenta pedagógica ineficiente: é um ponto cego na gestão de risco institucional. A pergunta que todo diretor acadêmico deveria fazer ao NDE não é "nosso simulado é difícil?", mas "nosso simulado mede exatamente o que o INEP vai medir, na mesma proporção e com a mesma calibração?".

Quais são os 5 critérios para avaliar se o simulado antecipa a prova real?

Um simulado que antecipa a prova real precisa comprovar aderência de blueprint à matriz completa, calibração psicométrica real, validação contra prova publicada, capacidade preditiva auditável de temas e volume de dados vivo o suficiente para se recalibrar. Cada critério abaixo é verificável e deve ser exigido por número, não por promessa comercial.

Critério 1: aderência de blueprint às 7 dimensões da Matriz 478/2025

A primeira pergunta que a coordenação deve fazer a qualquer fornecedor de simulado é: "seu banco de questões é tagueado nas 15 competências, 21 domínios, 7 áreas de formação, 6 cenários, 3 eixos e 3 níveis cognitivos, ou só nas 7 áreas?" A resposta separa instrumentos de comodidade de instrumentos de precisão. Um blueprint que ignora competências e domínios está medindo apenas uma fatia rasa do que o ENAMED efetivamente avalia.

No caso do banco proprietário SPR Med, essa aderência foi medida empiricamente contra a prova real do REVALIDA 2026.1, exame do INEP ancorado na mesma matriz que o ENAMED (e que, pela MP 1.370/2026, terá seu componente teórico substituído pela 2ª etapa do ENAMED). Os números de aderência, calculados dimensão a dimensão, foram: 89% nas 7 áreas, 86% nas 15 competências, 77% nos 21 domínios, 93% no eixo cognitivo, 95% no nível cognitivo e 91% nos cenários de prática do SUS. Nenhuma dessas seis dimensões ficou abaixo de 77%, o que indica um blueprint estruturalmente equivalente ao da prova real, não uma coincidência pontual em uma ou duas áreas fáceis de acertar por volume.

Dimensão da matriz	Aderência SPR Med × REVALIDA 2026.1
7 áreas de formação	89%
15 competências	86%
21 domínios	77%
Eixo cognitivo	93%
Nível cognitivo	95%
Cenários SUS	91%

A frase-mãe que resume esse critério é simples: não é coincidência, é blueprint. Quando um instrumento reproduz a estrutura completa da matriz oficial, a semelhança com a prova real deixa de ser sorte e passa a ser consequência direta de engenharia pedagógica. Qualquer coordenação deveria exigir esse tipo de tabela de aderência, dimensão por dimensão, antes de assinar contrato com qualquer fornecedor de simulado.

Critério 2: calibração TRI real, item por item

A segunda pergunta é técnica e frequentemente ignorada: "a dificuldade de cada questão do simulado foi calibrada por Teoria de Resposta ao Item, com parâmetro b estimado a partir de dados reais de resposta, ou foi definida por opinião de banca?" A diferença entre esses dois modelos é a diferença entre um instrumento psicométrico e uma lista de exercícios.

O ENAMED, assim como o ENADE antes dele, usa modelos de TRI para posicionar examinandos em uma escala comum de proficiência. Um simulado que não calibra seus itens pela mesma lógica (Rasch 1PL, com parâmetro de dificuldade b estimado empiricamente) produz uma nota que não é comparável à escala do INEP. Uma questão "fácil" no simulado pode ser, na prática, uma questão de dificuldade b alta na escala real, e vice-versa. Isso distorce completamente a leitura que a coordenação faz do desempenho da turma.

O banco SPR Med opera sobre 266.177 questões tagueadas na Matriz Pedagógica 7D, com mais de 3 milhões de respostas acumuladas, todas calibradas por TRI. É essa base que alimenta o M.A.E.S.T.R.O, o motor proprietário de machine learning que estima a Nota Final na escala INEP, a Classificação de Proficiência e o Nível de Confiança de cada aluno, com 94% de acurácia na predição de conceito. Sem calibração real item a item, nenhum motor preditivo desse tipo é possível: a predição de conceito depende de a dificuldade de cada questão estar ancorada na mesma métrica que o exame oficial usa.

Leia também74 de 100: o Teste de Fogo do Banco SPR Med no REVALIDA 2026.1 →

Critério 3: validação externa contra prova real publicada

A terceira pergunta é a mais concreta de todas: "o fornecedor já confrontou o banco de questões, uma a uma, contra uma prova real publicada do INEP, e publicou o resultado?" Promessas de aderência sem esse confronto documentado são apenas marketing. Validação externa exige um teste de fogo: pegar a prova real, depois que ela é publicada, e verificar quantas questões já tinham equivalente direto no banco.

O caso mais recente e mais rigoroso desse tipo de validação foi feito com o REVALIDA 2026.1. As 100 questões reais da prova foram confrontadas, uma a uma, com 1.942 questões inéditas dos 22 simulados aplicados naquele ano às faculdades parceiras do SPR Med. A metodologia combinou juiz de inteligência artificial (com pontuação de 0 a 100 por par), embeddings para proximidade semântica e sobreposição textual, com termos e condutas em comum grifados par a par para auditoria manual. O resultado: 74 das 100 questões reais tinham equivalente direto no banco, já aplicado em simulado antes da prova oficial.

Desses 74 pares, 3 foram classificados como quase idênticos, 27 como mesmo caso clínico e 173 como mesmo conceito clínico, totalizando 203 pares fortes de correspondência. Esse tipo de resultado só é possível quando o blueprint, a calibração e o volume de questões estão alinhados à mesma matriz que ancora a prova oficial: é a convergência dos critérios anteriores, comprovada empiricamente contra uma prova real e não contra uma simulação teórica.

É importante que a coordenação entenda o enquadramento correto desse tipo de resultado. Não se trata de acesso à prova, vazamento ou cópia: trata-se de duas provas do INEP (REVALIDA e ENAMED) ancoradas na mesma Matriz de Referência Comum, avaliando os mesmos temas prevalentes da prática clínica brasileira, com um banco de questões tagueado na mesma estrutura de 7 dimensões. Quando o blueprint é o mesmo, a convergência de temas e condutas é estatisticamente esperada, não suspeita.

Leia tambémREVALIDA 2026.1: Análise Completa da Prova por Área e Tema →

Critério 4: predição de temas com backtest auditável

A quarta pergunta separa quem tem um modelo estatístico de quem tem uma lista de "temas quentes" baseada em impressão de professores: "o fornecedor consegue mostrar, edição por edição, o histórico de acerto do seu modelo preditivo em dados que ele não usou para treinar o modelo (out-of-sample)?" Sem esse tipo de backtest auditável, qualquer lista de temas prováveis é apenas palpite qualificado.

O modelo de predição de temas usado pelo SPR Med é construído sobre Empirical Bayes, treinado com 17 edições de provas do INEP (ENARE de 2021 a 2026 e REVALIDA-INEP de 2020 a 2026). O backtest, feito edição por edição em modo out-of-sample, isto é, testando o modelo contra provas que ele nunca viu durante o treinamento, apresenta acerto de 80% a 90% no top 10 de temas previstos e de 55% a 70% no top 20.

No caso específico do REVALIDA 2026.1, o radar de 365 temas monitorados continha 100% dos 72 temas que efetivamente caíram na prova. Entre os 20 temas classificados como mais prováveis pelo modelo, 15 caíram de fato, respondendo por 28 questões da prova de 100 itens. É importante frisar a diferença entre esse tipo de predição e a predição de conceito: predição de temas mede a probabilidade de um assunto aparecer na prova (80% a 80 a 90% de acerto no top 10), enquanto predição de conceito mede a probabilidade de acerto na classificação final do curso na escala INEP (94% de acurácia). São duas métricas diferentes, com metodologias diferentes, e nenhum fornecedor sério deveria misturá-las em uma única promessa genérica.

A tabela a seguir mostra parte do desempenho real do modelo na predição de temas para o REVALIDA 2026.1, permitindo à coordenação visualizar como o ranking de probabilidade se traduziu em questões efetivas na prova.

Ranking do tema	Tema	Probabilidade prevista	Questões na prova real
1	Trauma e Emergência	91%	4
2	Hipertensão Arterial Sistêmica	87%	1
4	Infecções do trato genital	86%	3
5	Lesões precursoras	82%	2
9	Atenção Primária à Saúde	76%	1
11	Hérnias da parede abdominal	75%	1
12	Contracepção	72%	2
13	Avaliação perioperatória	70%	2
14	Infecções Respiratórias Baixas	68%	2
15	Saúde do Trabalhador	67%	1
16	Doenças Virais	67%	2

Para a próxima edição do exame, o ENAMED de 13 de setembro de 2026, esse mesmo modelo já está processando dados para gerar o radar de temas mais prováveis, permitindo à coordenação direcionar a mentoria e o reforço curricular nas últimas semanas antes da prova com base em probabilidade estatística, não em intuição de banca.

Leia tambémENAMED de 13 de Setembro de 2026: Os Temas Mais Prováveis →

Critério 5: volume vivo de respostas que recalibra a régua

A quinta pergunta é sobre continuidade: "o banco de questões é estático, atualizado uma vez por ano, ou vivo, recalibrado continuamente com dados reais de resposta dos alunos?" Um instrumento de calibração TRI perde precisão quando não recebe novos dados. A dificuldade real de uma questão muda conforme o perfil de quem responde, o momento do curso e as mudanças curriculares. Sem atualização contínua, a régua trava no tempo em que foi construída.

O banco SPR Med recebe atualmente cerca de 600 mil questões respondidas por mês pelas 8 instituições de ensino parceiras, volume que alimenta continuamente a recalibração TRI dos itens e o refinamento do modelo M.A.E.S.T.R.O. É esse volume vivo que permite ao motor preditivo ajustar, edição após edição, tanto a estimativa de dificuldade de cada questão quanto a precisão da predição de conceito. Um banco de 266 mil questões sem esse fluxo de respostas seria uma biblioteca estática; com o fluxo mensal de 600 mil respostas, ele se torna um instrumento de medição que se aprimora a cada ciclo.

Para a coordenação, esse critério tem uma implicação prática direta: quanto maior o volume vivo de dados de uma plataforma, menor o risco de a régua de proficiência estar desatualizada em relação ao perfil real dos estudantes e às mudanças na própria matriz do INEP.

Como aplicar o checklist na prática: dois casos institucionais

Números abstratos convencem menos que resultados aplicados. Dois casos ilustram o que acontece quando os cinco critérios são satisfeitos simultaneamente e a metodologia de Diagnóstico, Prescrição, Controle e Mentoria é aplicada de ponta a ponta.

A UNIMAR recebeu conceito 2 no ENAMED 2025, um resultado que colocava o curso em zona de risco regulatório imediato, próximo da faixa de suspensão de ingresso. Com a aplicação da metodologia SPR Med, sob condução da Profa. Fernanda Serva e do Dr. Carlos Bueno, a projeção da instituição para a edição de setembro de 2026 passou para a faixa de conceito 4 a 5, uma progressão de duas a três faixas em um único ciclo, sustentada pela combinação de blueprint aderente, diagnóstico calibrado por TRI e mentoria orientada por dados individuais de cada estudante.

O Grupo Integrado partiu de uma taxa de aproximadamente 50% de proficientes, projetando conceito 2, e alcançou 100% de proficientes projetados após a implementação da plataforma, com mais de 250 alunos engajados e taxa de engajamento de 92% no uso da ferramenta. Sob liderança do Dr. Heber Amilcar Martins, o resultado sustentou inclusive a decisão institucional de expandir a operação para uma nova unidade em Macapá, evidência de que o ganho de proficiência se traduziu em confiança suficiente para expansão de vagas, o movimento inverso ao corte de vagas que 46 cursos sofreram sob as Portarias 72, 73 e 74.

Esses dois casos têm em comum o mesmo padrão: partida em zona de risco regulatório real, aplicação de um instrumento com os cinco critérios satisfeitos e resultado mensurável em proficiência projetada, não em promessa. É esse padrão que qualquer coordenação deveria buscar como referência ao avaliar propostas concorrentes.

Leia também99 Cursos de Medicina Sob Supervisão: O Que Mudou com as Portarias 72, 73 e 74 →

O que muda para os cursos daqui até setembro de 2026?

Com o ENAMED marcado para 13 de setembro de 2026 e o exame agora semestral por força da MP 1.370/2026, o ciclo de decisão sobre instrumentos de simulado ficou mais curto. Cursos que ainda usam simulados sem aderência de blueprint, sem calibração TRI real e sem validação externa terão, na prática, uma única janela de correção de rota antes da próxima aplicação. A urgência é dupla: institucional, porque o desempenho coletivo do curso no ENAMED aciona supervisão do MEC independentemente da data de ingresso dos alunos, e curricular, porque a 1ª etapa do ENAMED, ao fim do 4º ano, embora diagnóstica e não habilitante, já é componente curricular obrigatório e está sendo monitorada pelo NDE como sinal precoce de risco.

A pergunta que deveria orientar o PDI de qualquer faculdade de medicina neste momento não é apenas "temos um simulado?", mas "nosso simulado passaria nos cinco critérios se fosse auditado hoje contra uma prova real do INEP?". A resposta honesta a essa pergunta define se a instituição está gerindo proficiência com dados ou apostando em intuição pedagógica.

Solicite uma análise diagnóstica gratuita do seu curso

Se sua instituição não consegue responder, com números documentados, aos cinco critérios deste artigo, o primeiro passo não é trocar de fornecedor por impulso: é obter um diagnóstico objetivo do estado atual do curso frente à Matriz de Referência Comum. O SPR Med, construído por médicos e operando um banco de 266.177 questões tagueadas na Matriz Pedagógica 7D e calibradas por TRI, oferece uma análise diagnóstica gratuita que confronta o perfil de proficiência atual da sua turma com as faixas de conceito do INEP, identificando exatamente onde estão as lacunas de blueprint, calibração e predição antes da próxima aplicação do ENAMED. Agende uma demonstração da plataforma SPR Med e veja como o M.A.E.S.T.R.O transforma dado bruto em decisão de gestão acadêmica.

Perguntas frequentes

O que significa um simulado ter "aderência de blueprint" à matriz do INEP?

Significa que a distribuição de questões do simulado reproduz, nas mesmas proporções aproximadas, as 15 competências, 21 domínios, 7 áreas de formação, 6 cenários, 3 eixos e 3 níveis cognitivos definidos pela Portaria INEP 478/2025. Um simulado organizado apenas pelas 7 áreas de formação, sem tagueamento de competências e domínios, mede uma fração incompleta da matriz real.

Qual a diferença entre predição de temas e predição de conceito?

Predição de temas estima a probabilidade de determinado assunto clínico aparecer na prova, com acerto histórico de 80% a 90% no top 10 de temas por edição. Predição de conceito estima a classificação final que o curso deve obter na escala do INEP, com 94% de acurácia no modelo M.A.E.S.T.R.O. São métricas diferentes, calculadas por metodologias diferentes, e não devem ser confundidas ao avaliar um fornecedor.

O resultado de 74 em 100 no REVALIDA significa acesso prévio à prova?

Não. O resultado decorre de duas provas do INEP (REVALIDA e ENAMED) ancoradas na mesma Matriz de Referência Comum e de um banco de questões tagueado na mesma estrutura de 7 dimensões dessa matriz, o que gera convergência estatisticamente esperada de temas e condutas clínicas prevalentes. Não há, em nenhuma etapa da metodologia, acesso a conteúdo da prova antes de sua publicação oficial.

Por que a calibração TRI é mais importante do que o número total de questões do banco?

Porque um banco grande, sem calibração por Teoria de Resposta ao Item, não permite posicionar o desempenho do aluno na mesma escala de proficiência usada pelo INEP. A quantidade de questões só se torna útil pedagogicamente quando cada item tem um parâmetro de dificuldade real, estimado a partir de dados de resposta, e comparável à métrica oficial do exame.

Como a 1ª etapa do ENAMED, ao fim do 4º ano, se relaciona com esses cinco critérios?

A 1ª etapa é diagnóstica, componente curricular obrigatório e não habilita o aluno ao exercício da medicina, mas seu resultado já sinaliza, dois anos antes da 2ª etapa, se o curso está formando proficiência de forma consistente com a matriz oficial. Um simulado que atenda aos cinco critérios deste artigo permite à coordenação usar essa etapa como alerta precoce, corrigindo lacunas antes que elas cheguem à 2ª etapa, que funciona como gate de registro no CRM para quem ingressou a partir de 19 de junho de 2026.

Quantos cursos de medicina estão hoje sob supervisão do MEC e por quê?

99 cursos de medicina estão sob supervisão da Seres/MEC, segundo as Portarias 72, 73 e 74, de 17 de março de 2026, com sanções que variam entre suspensão de ingresso (8 cursos), corte de 50% das vagas (13 cursos), corte de 25% das vagas (33 cursos) e proibição de ampliar vagas (45 cursos). Essa supervisão decorre diretamente do desempenho insuficiente no ENAMED, o que reforça a urgência de instrumentos de simulado que realmente antecipem a prova real.