Ir para o conteúdo

Guia de referência

EPAs: como avaliar se o aluno está pronto para a residência

Por Caio Hailton

Publicado em . Última revisão em . Leitura de 24 minutos.

Quatro estudantes de jaleco caminham pelo pátio de um prédio universitário

Resposta direta

Uma atividade profissional confiável (EPA, na sigla em inglês) é uma tarefa da rotina médica que a escola ou o programa de residência confia ao aprendiz com cada vez menos supervisão, à medida que reúne observações do seu desempenho; o guia da AMEE registra essa decisão numa escala de cinco níveis de supervisão. Num piloto em quatro escolas médicas americanas, com decisões sem consequência para o aluno, comitês de docentes julgaram os formandos prontos para supervisão indireta, isto é, para executar a atividade sem supervisão direta, em 43,4% das decisões de 2019 e em 60,1% das de 2020. Em prescrição, passagem de caso, urgência, consentimento e segurança do paciente, menos de 10% dos alunos foram julgados prontos, e os autores levantam a hipótese de que o estágio ofereça pouca oportunidade de praticar essas atividades e de ser avaliado nelas. Para uma estimativa confiável, um estudo na graduação calculou 5 avaliações por atividade, feitas por 5 avaliadores, e um estudo na residência calculou 12 avaliações distribuídas em três atividades, cada atividade avaliada 4 vezes por 4 supervisores. A simulação observa essas atividades em condições padronizadas. Num estudo com residentes, a nota na simulação se correlacionou de forma moderada com a nota no serviço, e os autores recomendam usar as duas nas decisões de progressão; o guia da AMEE trata a simulação como uma fonte entre várias, que não substitui a observação no local de trabalho.

Para quem este texto vale

Para quem coordena curso de medicina ou programa de residência e precisa decidir se adota atividades profissionais confiáveis, quais, com que escala, quantas observações exige e que peso dá à simulação na decisão de que o aluno está pronto para o internato ou para a residência. Os dados vêm de escolas dos Estados Unidos, do Canadá, da Alemanha e da Suíça, de estudantes no fim da graduação e de residentes. Os dois estudos brasileiros citados descrevem atividades e escalas, e nenhum deles mediu ainda a decisão de confiança em alunos.

Atividade profissional confiável é uma unidade da prática profissional que pode ser confiada por inteiro ao aprendiz depois que ele demonstra a competência necessária para executá-la sem supervisão [1]. A sigla corrente é EPA, de entrustable professional activity, e a versão em português do guia de ten Cate adota APC [2]. Decisão de confiança é o ato de autorizar o aprendiz a executar a atividade com menos supervisão. Ela pode ser ad hoc, tomada pelo supervisor no momento do atendimento, ou somativa, tomada depois de reunir várias observações, que “tem natureza de certificação” [2]. Avaliação no local de trabalho é a observação do aluno atendendo pacientes reais, registrada num formulário curto.

O que é uma atividade profissional confiável e como ela difere de competência

A atividade descreve trabalho, e a competência descreve a pessoa. O guia de 2019 de ten Cate, traduzido na Revista Brasileira de Educação Médica, resume a diferença numa frase: “Os profissionais possuem competências, mas nunca possuem APCs” [2]. As competências gerais, como comunicação ou profissionalismo, continuam a ser avaliadas e informam a decisão; a atividade é a unidade sobre a qual a decisão recai [2]. Na prática, o docente deixa de perguntar se o aluno tem boa comunicação e passa a perguntar se ele pode conduzir a passagem de caso do fim do turno sem o supervisor na sala.

A referência para a graduação é a lista de 13 atividades publicada em 2014 pela Association of American Medical Colleges (AAMC), a associação das escolas médicas americanas. O painel que a redigiu recebeu a tarefa de definir o que todo residente deveria executar no primeiro dia sem supervisão direta, qualquer que seja a especialidade [3]. As 13 atividades são: colher a história e fazer o exame físico; priorizar o diagnóstico diferencial; indicar e interpretar exames; registrar e discutir prescrições; documentar o atendimento; apresentar o caso oralmente; formular perguntas clínicas e buscar evidência; passar e receber o caso na troca de turno; trabalhar em equipe interprofissional; reconhecer o paciente que precisa de atendimento urgente e iniciar a conduta; obter consentimento informado; fazer os procedimentos gerais do médico; e identificar falhas do sistema e contribuir para a segurança [3].

A revisão de escopo de Pinilla e colaboradores, de 2021, reuniu 36 artigos sobre atividades confiáveis nos estágios clínicos da graduação, 22 deles (61%) dos Estados Unidos, e comparou três listas nacionais: a americana, com 13 atividades, a canadense, com 12, e a suíça, com 9 [4]. Na residência, a revisão sistemática de O’Dowd e colaboradores, de 2019, com 49 estudos, encontrou artigos que propunham de 1 a 76 atividades, quando a orientação citada pelos próprios autores sugere no máximo de 20 a 30 para um programa de residência [5]. Cada atividade a mais aumenta o número de observações que a escola terá de colher.

O guia de 2021 da Association for Medical Education in Europe (AMEE), escrito por ten Cate e Taylor, recomenda descrever cada atividade em oito partes: título; especificação e limites; riscos em caso de falha; domínios de competência mais relevantes; conhecimentos, habilidades, atitudes e experiência exigidos; fontes de informação para acompanhar o progresso e sustentar a decisão; nível de supervisão esperado em cada etapa da formação; e prazo de validade se a atividade deixar de ser praticada [1]. A sexta parte é a que importa para quem pergunta sobre simulação: a escola declara, antes de começar, de que fontes virá a decisão.

A escala de supervisão usada na decisão de confiança

A decisão de confiança se registra numa escala de supervisão. O guia da AMEE descreve cinco níveis: no primeiro, o aprendiz pode estar presente e observar, sem executar; no segundo, executa com supervisão direta e proativa, com o supervisor na sala; no terceiro, executa sem o supervisor na sala, mas com ele rapidamente disponível se for preciso; no quarto, trabalha sem supervisão; no quinto, supervisiona aprendizes mais novos [1]. O guia em português subdivide o terceiro nível em três graus: supervisor imediatamente acessível, com todos os achados e decisões conferidos; supervisor imediatamente acessível, com conferência só dos achados-chave; e supervisor à distância, por telefone, com achados e decisões revistos em seguida [2].

Escada dos cinco níveis de supervisão de uma atividade profissional confiável Cinco degraus, do nível um ao nível cinco. Nível um: observa, não executa. Nível dois: executa com o supervisor na sala. Nível três: executa com o supervisor acessível, em três graus, com tudo conferido, só o essencial conferido ou com o supervisor à distância. Nível quatro: executa sem supervisão. Nível cinco: supervisiona aprendizes mais novos. A meta da associação das escolas médicas americanas para o primeiro dia da residência é executar sem supervisão direta, o que, na escala da AMEE, equivale ao nível três. Nível 1 Nível 2 Nível 4 Nível 5 Nível 3 tudo conferido só o essencial à distância Observa,não executa Executa com osupervisor na sala Executa com osupervisor acessível Executa semsupervisão Supervisionaaprendizes mais novos Meta para o primeiro dia da residência: sem supervisão direta (AAMC, 2014)
Figura 1. Os cinco níveis de supervisão do guia da AMEE [1], com os três graus do nível 3 descritos no guia em português [2], e a meta da lista americana para o primeiro dia da residência [3]. As escolas usam variações dessa escala, da decisão binária a nove níveis, e a correspondência entre elas é aproximada [4].

As escolas não usam a mesma régua. Na revisão de 2021, as escalas foram desde a decisão binária, confia ou não confia, até escalas de 3 a 9 níveis, e o nível-alvo variou de estudo para estudo [4]. A proposta brasileira de atividades de ginecologia e obstetrícia para a graduação usa três níveis, de “Deve somente atuar sob supervisão direta” a “Pode atuar sem supervisão”, e registra que o atendimento sem supervisão não é permitido ao aluno de graduação por razões legais [6]. Na Charité, em Berlim, a escala tinha seis níveis [7]; na Universidade de Minnesota, cinco, redigidos do ponto de vista de quem supervisiona, do nível em que o supervisor fez o atendimento e o aluno observou ao nível em que o aluno fez e o supervisor conferiu só os elementos-chave [8].

A forma de redigir pesa na escolha. Uma escala que descreve o que o supervisor fez (“eu conferi todos os elementos”) pede ao avaliador que relate o ocorrido. Uma escala prospectiva (“eu confiaria que ele fizesse sozinho amanhã”) pede uma previsão, e um estudo de Hamburgo de 2022, descrito adiante, registra que avaliadores têm dificuldade com esse segundo tipo [9]. Para quem implanta, a regra prática é escolher uma escala, redigir os níveis em linguagem de supervisão, dizer por escrito o nível esperado ao fim de cada etapa e manter a mesma escala em todos os estágios.

O que o piloto americano mostrou sobre a prontidão para a residência

Em julho de 2014, a AAMC iniciou um piloto de cinco anos das 13 atividades com dez escolas americanas. Brown e colaboradores, em 2022, analisaram as decisões de quatro delas sobre as turmas que se formaram em 2019 e em 2020 [10]. Comitês de docentes treinados tomaram 4.525 decisões sobre 732 formandos, classificando cada aluno, em cada atividade, como pronto para supervisão indireta, progredindo mas ainda não pronto, sem progresso ou sem decisão possível. As decisões foram teóricas: não tinham consequência para a formatura do aluno [10].

A proporção de decisões “pronto para supervisão indireta” subiu de 43,4% em 2019 para 60,1% em 2020, e a de decisões que os comitês conseguiram tomar subiu de 75,4% para 90,2%. No mesmo intervalo, a proporção de decisões apoiadas em quatro ou mais avaliações no local de trabalho passou de 19,9% para 42,1% [10]. As escolas mudaram o processo entre um ano e outro, e entre as mudanças relatadas está o uso de métodos alternativos, como a simulação, para avaliar habilidades [10].

Proporção de formandos julgados prontos para supervisão indireta em cada uma das 13 atividades, em 2019 e em 2020 Em 2020: anamnese e exame físico, 87,2%; diagnóstico diferencial, 72,0%; exames diagnósticos, 70,7%; prescrições, 7,3%; registro no prontuário, 67,9%; apresentação oral, 93,2%; busca de evidência, 73,5%; passagem de caso, 9,4%; trabalho em equipe, 59,2%; urgência, 3,7%; consentimento, zero; procedimentos, 61,8%; segurança do paciente, zero. Em 2019: 52,7%, 41,0%, 22,0%, 9,0%, 64,2%, 64,8%, 74,5%, 7,2%, 54,6%, 2,0%, 1,0%, 45,4% e zero, na mesma ordem. 25%50%75%100% 1 Anamnese e exame físico87,2% 2 Diagnóstico diferencial72,0% 3 Exames diagnósticos70,7% 4 Prescrições7,3% 5 Registro no prontuário67,9% 6 Apresentação oral93,2% 7 Busca de evidência73,5% 8 Passagem de caso9,4% 9 Trabalho em equipe59,2% 10 Urgência3,7% 11 Consentimento0% 12 Procedimentos61,8% 13 Segurança do paciente0% 2020 2019
Figura 2. Proporção de formandos julgados prontos para supervisão indireta em cada atividade, em quatro escolas do piloto americano, por turma [10]. O centro é zero e o contorno externo, 100%. O percentual sob o nome de cada atividade é o da turma de 2020. O número de alunos avaliados variou por atividade, de 82 a 383, porque cada escola implantou um conjunto diferente de atividades. Percentuais calculados do número de alunos da tabela 3 do estudo. As decisões foram teóricas e sem consequência para o aluno.

A prontidão dependeu da atividade. Em 2020, 93,2% dos alunos avaliados foram julgados prontos para apresentar o caso oralmente e 87,2% para colher a história e examinar. Em cinco atividades, prescrição, passagem de caso, urgência, consentimento e segurança do paciente, menos de 10% dos alunos foram julgados prontos nos dois anos, e em consentimento e em segurança do paciente nenhum aluno foi julgado pronto em 2020 [10]. Para esse grupo, os autores propõem hipóteses. Sobre urgência, consentimento e segurança, que pedem habilidades de nível mais alto, escrevem que os cenários clínicos atuais podem não dar ao aluno oportunidade real de participar do atendimento e de ser avaliado no serviço. Sobre prescrição e passagem de caso, sugerem que elas se alinham melhor ao subinternato do último ano e que, mesmo ali, a oportunidade pode ser limitada ou a supervisão pode não ser intencional o bastante para colher evidência que sustente a decisão [10]. Lembram ainda que a urgência costuma ser ensinada em aulas e em simulação e que, nos procedimentos, a simulação é de uso comum no ensino e na avaliação [10].

O próprio artigo dá os limites: quatro escolas, duas turmas, subconjuntos diferentes de alunos em cada atividade e avaliações no local de trabalho em número abaixo do que seria ideal para decisões de alta consequência [10]. A conclusão dos autores é que fazer julgamentos prospectivos sobre a prontidão enfrenta desafios substanciais.

Quantas observações uma decisão de confiança exige

Não há número único. O guia da AMEE afirma que não é possível dar uma resposta geral, válida para todas as atividades, e recomenda fixar a regra atividade por atividade, com mais rigor quando a decisão autoriza o trabalho sem supervisão [1]. O mesmo guia descreve a regra do Centro Médico Universitário de Utrecht, na Holanda, para a maioria das atividades menores em que se dividem as atividades do estágio: duas discussões voltadas à decisão de confiança e duas observações breves, todas recentes e satisfatórias, em que satisfatório quer dizer que o docente aceita declarar o aluno pronto para supervisão indireta [1].

Os estudos de confiabilidade dão a ordem de grandeza. Confiabilidade, aqui, é o coeficiente de 0 a 1 que diz quanto a média das avaliações de um aluno se repetiria com outras observações e outros avaliadores. Na Universidade de Minnesota, 398 alunos do terceiro ano acumularam 10.034 avaliações no estágio de clínica médica, média de 25 por aluno, e o estudo calculou, numa amostra de 72 alunos com seis ou mais avaliações na primeira atividade, que eram necessárias cinco avaliações, feitas por cinco avaliadores, para chegar a coeficiente acima de 0,80 [8]. O cálculo foi feito só para essa atividade e estendido às demais, e os autores observam que cobrir as 13 atividades exigiria 65 avaliações por aluno. Eles registram que o número é menor do que o encontrado em outros estudos, atribuem a diferença à familiaridade da escola com as atividades e consideram que o número de avaliações e de avaliadores provavelmente varia de instituição para instituição [8].

Na residência, 28 dos 53 programas suíços de anestesiologia registraram 3.936 avaliações num aplicativo de celular, entre abril e agosto de 2021 [11]. A mediana foi de oito avaliações por residente em cinco meses. Para coeficiente acima de 0,7, o estudo calculou que seriam precisas pelo menos três atividades diferentes, cada uma avaliada pelo menos quatro vezes por quatro supervisores diferentes, ou 12 avaliações [11]. Programas pequenos e grandes não diferiram no número de avaliações por residente, e os autores concluem que a avaliação frequente é viável nos dois.

Tabela 1. Número de observações por aluno em estudos de avaliação de atividades confiáveis [1, 8, 10, 11].

Estudo Nível de formação Observações registradas Número que o estudo indica
Regra de Utrecht, descrita no guia da AMEE [1] Estágio da graduação 2 discussões e 2 observações breves satisfatórias por atividade
Piloto americano, 4 escolas, 2019 e 2020 [10] Formandos Decisões com 4 ou mais avaliações: 19,9% em 2019 e 42,1% em 2020 Os autores julgam o volume abaixo do ideal para decisão de alta consequência
Minnesota, estágio de clínica médica [8] Terceiro ano Média de 25 por aluno em 8 semanas 5 avaliações por 5 avaliadores para coeficiente acima de 0,80, na atividade 1
Programas suíços de anestesiologia [11] Residência Mediana de 8 por residente em 5 meses 3 atividades, cada uma 4 vezes por 4 supervisores, para coeficiente acima de 0,7

Célula vazia indica dado não disponível na fonte. Os coeficientes das duas últimas linhas vêm de estudos de generalizabilidade, que estimam quantas observações seriam precisas, e não de decisões tomadas.

O número de observações cresce porque o desempenho varia de caso para caso. A confiabilidade de uma prova depende mais do tamanho da amostra de casos do que do método, como mostra o guia sobre como ensinar e avaliar raciocínio clínico com casos simulados, e a mesma lógica vale para a observação no serviço. A diferença está no custo: cada observação no local de trabalho depende de um paciente adequado aparecer no turno certo, diante de um supervisor com tempo para registrar.

Quem observa o aluno e quem toma a decisão de confiança

Quem observa e quem decide são papéis diferentes. A decisão ad hoc é do supervisor que está com o aluno. Para a somativa, o guia da AMEE descreve dados reunidos no portfólio do aluno e revistos pelo comitê de competência clínica, o grupo de docentes que reúne as informações de cada aluno, numa decisão que não se reduz a um algoritmo ditado pelos números: para o guia, a confiança continua sendo uma decisão humana, tomada por especialistas [1]. O guia em português pede para a decisão somativa “um acordo entre múltiplos observadores e observações” [2].

Na prática, quem observa é muitas vezes o residente. Em Minnesota, das 825 pessoas que avaliaram alunos, 528 eram residentes e 297 docentes [8]. A autoavaliação do aluno não substitui a observação: na revisão de 2021, as notas que os estudantes deram a si mesmos não se correlacionaram bem com as de avaliadores experientes [4]. O preparo do avaliador também pesa. Na Charité, os 54 médicos que aplicaram a escala de confiança no exame de 2017 não tiveram treino de calibração, e os autores contam isso entre os limites do estudo [7].

Há ainda o viés da escolha do caso. Quando o próprio aluno escolhe qual atendimento será avaliado, a escolha pode favorecer o caso em que ele foi bem. No estudo canadense de 2019 descrito na seção seguinte, os autores registram que a avaliação no serviço pode ter sido enviesada pela seleção de casos mais favoráveis ao aprendiz [12]. Uma regra que define de antemão quais situações contam, e em que proporção, reduz esse viés.

O que a simulação pode sustentar numa decisão de confiança

A simulação entra na decisão como uma das fontes de informação. O guia da AMEE diz que os testes de conhecimento e de habilidades e os testes com simulação também podem ser importantes, mas acontecem fora do local de trabalho e não substituem a avaliação no serviço [1]. Na residência, quatro dos 12 estudos de implantação ou de avaliação revistos por O’Dowd e colaboradores (33%) avaliaram o residente numa atividade em ambiente simulado, e os autores escrevem que o papel da simulação nessa avaliação merece ser mais explorado, dado o uso bem-sucedido em vários dos estudos incluídos [5].

A comparação mais direta entre as duas fontes vem de um estudo de coorte da Queen’s University, no Canadá, publicado em 2019. Residentes de medicina de emergência foram avaliados com a mesma escala de confiança em atendimentos de reanimação simulados, com atores nos papéis da equipe, e em atendimentos reais no pronto-socorro [12]. Dos 28 residentes recrutados, 17 tiveram dados nos dois cenários. A correlação entre as médias foi de 0,630, moderada e estatisticamente significativa. A média no serviço foi maior, 4,19 contra 3,34 na simulação, e os autores levantam duas explicações: o formulário do serviço era acionado pelo próprio residente, que escolhia o caso, e a simulação, sem o ruído do pronto-socorro, pode refletir melhor a competência em habilidades específicas de reanimação [12]. Entre os limites, registram que no serviço a avaliação não pôde ser cega, o que expõe a nota a efeito halo e a leniência, enquanto na simulação avaliadores externos cegos conferiram a pontuação; e que os casos dos dois cenários não foram pareados [12]. A conclusão é que a avaliação simulada se aproxima da avaliação no serviço, e que as decisões de progressão de alta consequência deveriam incluir as duas; pela amostra pequena, pedem estudos maiores, em vários centros, antes de generalizar o achado [12].

Tabela 2. Estudos que aplicaram escala de confiança ou de supervisão a desempenho em simulação [7, 9, 12, 13, 14].

Estudo Formato da simulação Participantes Resultado principal
Charité, Berlim, 2019 [7] Exame clínico objetivo estruturado (OSCE) de 6 estações com pacientes padronizados ou modelos, antes do último ano 227 estudantes, 54 avaliadores Todos aprovados no OSCE; 31% abaixo do nível de supervisão esperado em ao menos uma estação
Queen’s University, Canadá, 2019 [12] Reanimação simulada, com atores nos papéis da equipe, comparada ao pronto-socorro 17 residentes com dados nos dois cenários Correlação de 0,630 entre simulação e serviço
Ohio State, Estados Unidos, 2017 [13] Casos de emergência em manequim de alta fidelidade 114 alunos do último ano (62% da turma) 86,8% atingiram a confiança global; 20% não pediram ajuda quando necessário
Hamburgo, Alemanha, 2022 [9] Primeiro dia de residência simulado por videoconferência, com atores 32 formandos Concordância entre avaliadores de 0,77 a 0,96; confiança maior no grupo da enfermaria de treino em 10 de 12 atividades, julgadas de forma prospectiva
Stanford, Estados Unidos, 2023 [14] Paciente virtual em tela, no navegador 19 participantes, de estudantes a cirurgiões Correlação de 0,82 entre anos de formação e pontuação total; subpontuação da simulação pré-operatória sem diferença significativa entre níveis; pontuação ainda não convertida em nível de supervisão

O estudo da Charité mostra o que a escala de confiança acrescenta a um exame que já existe. No OSCE (exame clínico objetivo estruturado) do quinto ano, que o aluno precisa passar para entrar no último ano de estágio, os 54 avaliadores marcaram, além da nota habitual, o nível de supervisão que dariam a cada um dos 227 alunos em cada estação. Todos os alunos atingiram a nota de corte e passaram no exame, mas 31% ficaram abaixo do nível esperado em pelo menos uma estação, 15% em duas e 6% em três ou mais [7]. A nota e a escala divergiram, e os autores propõem usar a escala, nessa função, como retorno formativo sobre a prontidão para a prática [7]. Quanto da nota de um OSCE depende de quem avalia e quantas estações uma decisão de aprovação pede está no guia sobre como montar um OSCE com estações de simulação.

A simulação também observa o que o serviço não oferece. Na Ohio State University, 114 alunos do último ano, 62% da turma, conduziram casos de emergência em manequim, cada um como líder da equipe num caso, avaliados com três ações críticas comuns a todos os casos, ações específicas de cada caso e uma pergunta global sobre se o avaliador confiaria a atividade ao aluno. Do total, 86,8% atingiram a confiança global, e 20% dos alunos (23 de 114) não pediram ajuda quando precisavam [13]. A concordância entre avaliadores variou por caso, e a avaliação foi formativa; os autores escrevem que falta estudar quanto a confiança baseada num só caso simulado prevê a confiança no cuidado de pacientes reais [13]. Em Hamburgo, 32 formandos atenderam pacientes simulados por atores numa videoconferência que reproduzia o primeiro dia da residência, e três médicos experientes pontuaram 12 atividades a partir das apresentações gravadas, com concordância entre eles de 0,77 a 0,96 [9]. O estudo comparou alunos que tinham passado por uma enfermaria de treino interprofissional com alunos que não tinham, e os avaliadores atribuíram ao primeiro grupo nível de confiança mais alto em 10 das 12 atividades [9]. Os autores contam entre os limites o julgamento prospectivo, inferido da apresentação de caso, a escola única e a amostra pequena; as 12 atividades, além disso, não correspondiam às tarefas executadas na simulação [9].

O paciente virtual em tela começou a ser testado para esse fim. Na Universidade Stanford, uma plataforma de navegador em que o examinado examina, pede exames e trata um paciente cujos sinais vitais mudam conforme o estado clínico e as intervenções feitas foi aplicada a 19 pessoas, de estudantes a cirurgiões, num caso ligado a uma atividade da residência de cirurgia [14]. A pontuação total cresceu com os anos de formação (correlação de 0,82), com medianas de 175 pontos entre estudantes, 400 entre residentes e 1.500 entre cirurgiões, e não se correlacionou com a experiência prévia em videogame [14]. O caso tem duas partes: a simulação do pré-operatório, em que o examinado conduz o paciente, e perguntas de múltipla escolha sobre o intraoperatório e as complicações do pós-operatório. A subpontuação das perguntas acompanhou os anos de formação (correlação de 0,70); a da simulação pré-operatória não diferiu de forma significativa entre os níveis de formação (correlação de 0,39, p = 0,10), o que os autores atribuem, mais provavelmente, à amostra pequena [14]. Os autores falam em viabilidade e em evidência inicial de validade, com a ressalva de um caso só, numa amostra pequena e numa instituição; descrevem a plataforma como complemento das observações curtas no serviço e listam como próximo passo ligar o que o examinado faz na plataforma aos níveis de supervisão [14].

Nesses estudos, a simulação serviu para observar todos os alunos na mesma atividade, com o mesmo caso e o mesmo critério; para observar atividades de risco que o estágio raramente oferece, lacuna que os registros de casos confirmam quando medem o que cada aluno de fato encontra no estágio; e para identificar cedo quem está abaixo do nível esperado e orientar o estágio seguinte. A pergunta sobre o que vem depois vale para as duas fontes: nenhum dos estudos citados acompanhou o aluno para saber se a decisão de confiança, tomada com simulação ou com observação no serviço, prevê o desempenho seguinte, e a revisão de 2021 sobre a graduação não encontrou estudo empírico que comparasse desfechos educacionais a partir dessas decisões [4]. Os níveis de desfecho de um treino com simulação, do que se mede no laboratório ao que chega ao paciente, estão descritos no guia O treino com simulação melhora o cuidado ao paciente?.

O que as diretrizes de 2025 pedem e as atividades confiáveis propostas no Brasil

As Diretrizes Curriculares Nacionais de 2025 não usam o termo atividade profissional confiável, mas pedem o tipo de sistema em que ele se encaixa. A Resolução CNE/CES nº 3, de 30 de setembro de 2025, manda o projeto pedagógico prever uma avaliação “fundamentada nos princípios da avaliação programática”, com “devolutiva individual obrigatória, tempestiva e qualificadora (feedback)”, e exige ao menos uma avaliação somativa abrangente “imediatamente anterior ao início do internato”, para assegurar que o estudante tenha “as competências mínimas exigidas para a atuação supervisionada em ambiente clínico real” (artigo 36) [15]. Avaliação programática é o desenho em que a decisão sobre o aluno resulta de muitas avaliações pequenas, de fontes diferentes, reunidas ao longo do tempo.

O artigo 37 divide a avaliação em três domínios e situa o psicomotor em “demonstrar e realizar habilidades profissionais, em cenários simulados e controlados e em ambientes reais da prática profissional” [15]. É a mesma combinação de fontes que a decisão de confiança pede. O mesmo artigo pede “um sistema de avaliação contínua, específica e estruturada do internato” e, nos casos de baixo desempenho, “um plano de ação individualizado” [15]. O internato tem duração mínima de dois anos e deve ser “integralmente supervisionado por docentes da IES” (artigo 32) [15]. Como identificar o estudante abaixo do esperado e montar esse plano de ação é o assunto do guia sobre como identificar e apoiar o estudante de medicina com dificuldade. Uma escola que adote atividades confiáveis pode usar o nível de supervisão como parte da avaliação somativa anterior ao internato e como linguagem comum entre docentes e preceptores durante ele.

Há duas propostas brasileiras publicadas. Na residência de Medicina de Família e Comunidade, um grupo de seis especialistas e educadores redigiu 14 atividades a partir da matriz de competências da Comissão Nacional de Residência Médica e de modelos dos Estados Unidos, do Canadá e da Austrália, e um painel Delphi de especialistas aprovou as 14 em duas rodadas, com 24 participantes na primeira e 12 na segunda [16]. Uma das atividades, sobre vulnerabilidades e condições complexas na atenção primária, não tinha correspondente na literatura internacional revista. Na graduação, uma escola de Curitiba elaborou 13 atividades de ginecologia e obstetrícia, com lista de verificação para avaliador e aluno, validadas por 20 e depois 18 docentes da especialidade [6]. Os autores escrevem que ainda é preciso avaliar a aplicabilidade das atividades na graduação, o que um projeto-piloto da escola começou a fazer [6].

O que ainda não se sabe

  • Se a decisão de confiança prevê o desempenho do aluno no serviço depois dela. Os estudos citados medem a decisão, tomada com simulação ou com observação no serviço, e não o que acontece depois [4, 10].
  • Quantas observações bastam para cada atividade. As estimativas disponíveis vêm de poucos estudos; a da graduação foi calculada para uma só atividade, e os seus autores consideram que o número provavelmente varia de instituição para instituição [8, 11].
  • Quanto um resultado em simulação pode pesar na decisão somativa. A única comparação direta no mesmo grupo teve 17 residentes e casos diferentes nos dois cenários [12].
  • Se a pontuação de um paciente virtual em tela pode ser convertida em nível de supervisão. O estudo publicado ainda não fez essa ligação [14].
  • Quantos alunos brasileiros chegam ao nível esperado nas atividades propostas no país. Nenhum estudo brasileiro mediu [6, 16].

Como adotar atividades confiáveis na sua instituição

Comece com poucas atividades e com a lista americana como ponto de partida, porque ela já define o que se espera no primeiro dia da residência [3]. Para cada atividade, escreva as oito partes recomendadas pelo guia da AMEE, com atenção a duas delas: o nível de supervisão esperado ao fim de cada etapa e as fontes de informação que contarão na decisão [1].

Fixe, por atividade, um número mínimo de observações e de avaliadores diferentes antes da decisão somativa; as estimativas da Tabela 1 dão a ordem de grandeza [8, 11]. Defina quem decide: o supervisor do dia toma as decisões ad hoc, e um comitê reúne as avaliações e registra a decisão somativa [1, 2]. Treine os avaliadores na escala antes de usá-la numa decisão que conte para o aluno [7].

Use a simulação onde o estágio não alcança. Nas cinco atividades de prontidão mais baixa no piloto americano, a hipótese dos autores é a pouca oportunidade de praticar e de ser avaliado no serviço [10]. Nessas atividades, a simulação permite observar a turma inteira no mesmo caso, com o mesmo critério, e registrar o nível de supervisão que o avaliador daria. Esse registro entra no portfólio do aluno como uma das fontes da decisão, ao lado das observações no serviço, e orienta o que ele precisa praticar no internato [1, 12].

Fovea™ é um simulador clínico em tela: o estado do paciente evolui conforme as decisões do estudante, e o docente recebe um relatório por aluno e por turma com as decisões que cada estudante tomou no caso. Numa escola que adota atividades confiáveis, esse relatório permite observar a turma inteira nos mesmos casos, inclusive nas situações que o estágio raramente oferece, e entra no portfólio como uma das fontes que o comitê reúne, ao lado das observações no serviço. Para ver o simulador com a sua equipe, solicite uma demonstração.

Referências

  1. ten Cate O, Taylor DR. The recommended description of an entrustable professional activity: AMEE Guide No. 140. Med Teach. 2021;43(10):1106-1114. doi:10.1080/0142159X.2020.1838465
  2. ten Cate O. Guia atualizado sobre Atividades Profissionais Confiáveis (APCs). Rev Bras Educ Med. 2019;43(1 supl 1):712-720. doi:10.1590/1981-5271v43suplemento1-20190238
  3. Association of American Medical Colleges. Core Entrustable Professional Activities for Entering Residency: Curriculum Developers' Guide. Washington, DC: AAMC; 2014. Abrir a fonte
  4. Pinilla S, Lenouvel E, Cantisani A, Klöppel S, Strik W, Huwendiek S, Nissen C. Working with entrustable professional activities in clinical education in undergraduate medical education: a scoping review. BMC Med Educ. 2021;21:172. doi:10.1186/s12909-021-02608-9
  5. O'Dowd E, Lydon S, O'Connor P, Madden C, Byrne D. A systematic review of 7 years of research on entrustable professional activities in graduate medical education, 2011-2018. Med Educ. 2019;53(3):234-249. doi:10.1111/medu.13792
  6. Novellino AMDM, Coelho ICMM. Elaboração de Atividades Profissionais Confiáveis (APCs) em ginecologia e obstetrícia para a graduação médica. Rev Bras Educ Med. 2021;45(4):e190. doi:10.1590/1981-5271v45.4-20200472
  7. Holzhausen Y, Maaz A, März M, Sehy V, Peters H. Exploring the introduction of entrustment rating scales in an existing objective structured clinical examination. BMC Med Educ. 2019;19:319. doi:10.1186/s12909-019-1736-2
  8. Lister J, Jaffer S, Poeppelman RS, et al. Implementation of Core Entrustable Professional Activities in the Internal Medicine Clerkship: A Psychometric Study. J Gen Intern Med. 2026;41:3177-3185. doi:10.1007/s11606-026-10210-2
  9. Brätz J, Bußenius L, Brätz I, Grahn H, Prediger S, Harendza S. Assessment of final-year medical students' entrustable professional activities after education on an interprofessional training ward: a case-control study. Perspect Med Educ. 2022;11(5):266-272. doi:10.1007/s40037-022-00720-0
  10. Brown DR, Moeller JJ, Grbic D, Andriole DA, Cutrer WB, Obeso VT, et al. Comparing Entrustment Decision-Making Outcomes of the Core Entrustable Professional Activities Pilot, 2019-2020. JAMA Netw Open. 2022;5(9):e2233342. doi:10.1001/jamanetworkopen.2022.33342
  11. Tessmann T, Marty AP, Stricker D, Huwendiek S, Breckwoldt J. There is no 'too small' for frequent workplace-based assessment: differences between large and small residency programs in anesthesia when using a mobile application to assess EPAs. GMS J Med Educ. 2024;41(5):Doc54. doi:10.3205/zma001709
  12. Weersink K, Hall AK, Rich J, Szulewski A, Dagnone JD. Simulation versus real-world performance: a direct comparison of emergency medicine resident resuscitation entrustment scoring. Adv Simul (Lond). 2019;4:9. doi:10.1186/s41077-019-0099-4
  13. Thompson LR, Leung CG, Green B, Lipps J, Schaffernocker T, Ledford C, et al. Development of an assessment for Entrustable Professional Activity (EPA) 10: emergent patient management. West J Emerg Med. 2017;18(1):35-42. doi:10.5811/westjem.2016.10.31479
  14. Lin DT, Melcer EF, Keehl O, Eddington H, Trickey AW, Tsai J, et al. ENTRUST: a serious game-based virtual patient platform to assess entrustable professional activities in graduate medical education. J Grad Med Educ. 2023;15(2):228-236. doi:10.4300/JGME-D-22-00518.1
  15. Brasil. Conselho Nacional de Educação, Câmara de Educação Superior. Resolução CNE/CES nº 3, de 30 de setembro de 2025. Institui Diretrizes Curriculares Nacionais do Curso de Graduação em Medicina. Diário Oficial da União, 1º de outubro de 2025, seção 1, p. 35-37. Abrir a fonte
  16. Brito LAR, Caramori U, D'Abreu NB, Cardoso Filho C, Cunha LO, Bragança JF. Atividades profissionais confiáveis para a residência em Medicina de Família e Comunidade no contexto brasileiro. Rev Bras Educ Med. 2025;49(1):e029. doi:10.1590/1981-5271v49.1-2024-0198

Continue lendo

Acessibilidade

Ajuste a leitura ao seu conforto.

Tamanho do texto