Clicked Gallery

O que são níveis de evidência? (A pirâmide de evidências)

Sublinhado num livro didático real. Explicado pelo Clicked.

Usado numa frase

University Course Reader · STEM

The guideline rated the claim at the second-highest level of evidence, since it rested on one randomised trial rather than a systematic review.

O leitor sublinhou um termo — num artigo ou no PDF de um paper. O Clicked tornou o termo estatístico «level of evidence» fácil de entender:

Explicado em três níveis

Os mesmos fatos, outra vibe — Modo slang 😎

O método Clicked

●○○

Overview

Níveis de evidência são uma classificação dos jeitos de checar uma afirmação, pelo quanto cada um protege a resposta de estar errada. Embaixo fica o raciocínio sobre como algo deveria funcionar, depois a história de um paciente, depois um conjunto dessas histórias. Acima deles está uma comparação de grupos que se formaram sozinhos (um estudo observacional). Acima disso está um ensaio em que um sorteio decide quem recebe o tratamento (um ensaio clínico randomizado). No topo está uma revisão que reúne todos esses ensaios e combina os resultados (uma revisão sistemática). Cada degrau descarta um jeito de ser enganado que o degrau abaixo deixava entrar. O nível classifica o desenho, não o resultado, então um ensaio pequeno e descuidado é rebaixado e um estudo cuidadoso de nível mais baixo com um efeito enorme é promovido. O topo costuma estar vazio: no exemplo da própria Oxford, 2.175 artigos sobre uma pergunta a respeito de um remédio continham 7 ensaios randomizados. Cada degrau acima na pirâmide de evidências tira um jeito de ser enganado.
●○○

Overview

Níveis de evidência são a hierarquia da prova: uma classificação de como uma afirmação foi checada, de «faz sentido que funcione» embaixo até «todo ensaio justo já feito, somado» no topo. Degrau de baixo: alguém raciocinando que deveria funcionar. Próximo: um paciente melhorou. Próximo: um punhado de pacientes melhorou. Próximo: quem tomou se saiu melhor do que quem não tomou, só que ninguém checou se as duas turmas eram parecidas. Próximo: um sorteio decide quem recebe, então as duas turmas são parecidas. Topo: reúna cada um desses ensaios e junte os números. Cada degrau acima mata um jeito de se enganar. O degrau é um peso inicial, não uma medalha. A tabela de Oxford diz que um ensaio desleixado desce por ela e um estudo cuidadoso com um efeito enorme sobe. E os degraus de cima costumam estar vazios: uma busca de Oxford achou 2.175 artigos sobre uma pergunta a respeito de um remédio e 7 ensaios de verdade entre eles. Suba a escada e cada degrau risca um jeito de ser enganado. 😎

Uma ideia rápida — muitas vezes é tudo de que você precisa.

●●○

Detail

Níveis de evidência classificam desenhos de estudo pelo quanto cada desenho descarta, para que quem lê saiba com que peso um achado começa. A classificação mais citada é a tabela de 2011 do Oxford Centre for Evidence-Based Medicine, que para a pergunta «este tratamento ajuda?» tem cinco níveis. O nível 5, o de baixo, é o raciocínio sobre como o tratamento deveria funcionar. O nível 4 são relatos de caso e séries de casos (a história de um paciente, ou um conjunto delas) e estudos caso-controle (pessoas com a doença comparadas com pessoas sem ela). O nível 3 é um estudo de coorte (um grupo que tomou o tratamento acompanhado ao lado de um que não tomou). O nível 2 é um ensaio clínico randomizado (um sorteio decide quem recebe o tratamento), ou um estudo observacional com um efeito dramático. O nível 1 é uma revisão sistemática de ensaios randomizados (todo ensaio que atinge uma régua definida, reunido e combinado). Cada nível supera o de baixo porque fecha um jeito de ser enganado. O raciocínio pode ser enganado por quem raciocina. Um caso pode ser enganado por aquele caso. Uma série pode ser enganada por quem foi contado. Grupos que se escolheram sozinhos podem ser enganados por uma variável de confusão (uma diferença escondida que move o desfecho), e tamanho não cura isso: um milhão de pessoas autosselecionadas pode compartilhar a mesma diferença escondida. Um sorteio a remove e deixa o acaso, e combinar muitos ensaios encolhe o acaso. O nível é um peso inicial, não um veredicto. A nota de rodapé da própria tabela rebaixa um nível por qualidade ruim, resultados imprecisos ou inconsistência entre estudos, e o promove por um efeito muito grande. Os degraus de cima costumam estar vazios: a busca da própria Oxford sobre uma pergunta a respeito de um remédio retornou 2.175 artigos, dos quais 7 eram ensaios randomizados, 366 estudos de coorte, 234 estudos caso-controle e 196 relatos de caso. Uma revisão de ensaios fracos é fraca, e ela só combina o que foi publicado (viés de publicação). Leia qualquer estudo perguntando em que degrau ele está, o que isso descarta e o que deixa entrar.
●●○

Detail

Níveis de evidência são uma classificação de como uma afirmação foi testada, e a posição diz quanto benefício da dúvida um achado ganha para começar. A tabela de 2011 de Oxford é a que as pessoas citam, e para «este tratamento ajuda?» ela tem cinco degraus, então vamos do topo para baixo. Nível 1: uma revisão sistemática, que caça todo ensaio randomizado sobre a pergunta e combina todos, para que a sorte de nenhum ensaio sozinho tenha a palavra final. Nível 2: um único ensaio clínico randomizado, em que só o acaso escolhe quem recebe o tratamento, então os dois grupos batem em tudo, inclusive no que ninguém mediu. Nível 3: um estudo de coorte, em que quem tomou é acompanhado ao lado de quem não tomou, e agora uma diferença escondida entre as duas turmas (uma variável de confusão) pode se infiltrar. Nível 4: estudos caso-controle, séries de casos e relatos de caso isolados, que partem de pessoas que já têm o desfecho e olham para trás, então quem acabou na amostra pode viciar o resultado. Nível 5: raciocinar que deveria funcionar pelo jeito como o corpo funciona, checado por ninguém além de quem raciocinou. Cada degrau para baixo deixa mais um jeito de errar entrar de volta. Duas armadilhas. Primeira, grande não vence justo: uma coorte do tamanho de uma cidade, todos voluntários, ainda pode carregar uma diferença escondida, e um ensaio de 500 pessoas escolhidas pelo acaso não pode. Segunda, o degrau é onde um estudo começa, não onde termina. As letras miúdas da própria tabela rebaixam um nível por qualidade ruim, resultados nebulosos ou ensaios que discordam, e o promovem por um efeito enorme. Os degraus de cima estão quase sempre vazios: a busca da própria Oxford achou 2.175 artigos sobre uma pergunta a respeito de um remédio, 7 deles ensaios randomizados, enquanto quase 800 ficavam nos dois degraus abaixo. E uma revisão só é tão boa quanto os seus ensaios, e só consegue combinar o que foi publicado (viés de publicação). Então, quando uma manchete disser «um estudo mostra», pergunte qual degrau, o que ele descarta e o que deixou entrar de volta. 😎

Quer mais? Um clique aprofunda.

●●●

Analogy

Níveis de evidência classificam os jeitos de checar uma afirmação por quantos jeitos de ser enganado cada um fecha, e contratar alguém funciona do mesmo modo. O mais baixo: o relato do próprio candidato sobre o seu trabalho, pelo qual só o candidato responde. Próximo: uma referência, que é a visão de uma pessoa. Depois, três referências de três empregos diferentes que concordam, o que ainda pode ser enganado por quem o candidato escolheu listar. Depois, as vendas dele, 20 % acima das da equipe ao longo de dois anos, o que pode ser enganado pela carteira de clientes que ele recebeu. O mais alto: um teste prático em que dois candidatos fazem a mesma tarefa e quem avalia não sabe de quem é cada trabalho, que só um dia ruim consegue enganar. Cada degrau acima fecha uma porta que o degrau abaixo deixou aberta. Onde a classificação é um começo e não um veredicto: um teste prático avaliado pelo amigo do candidato vale menos do que três referências sólidas. Um degrau alto feito mal perde para um degrau baixo feito bem, e isso vale para estudos também.
●●●

Analogy

Níveis de evidência ordenam os jeitos de descobrir algo por quantas rotas para o erro cada um bloqueou, e «esses fones vão quebrar?» percorre a escada inteira. Uma avaliação de uma estrela: uma história. Um tópico em que 300 pessoas dizem que o delas morreu: 300 histórias, das pessoas irritadas o bastante para postar. As taxas de devolução por marca de uma empresa de garantia: uma comparação de verdade, só que usuários pesados tendem a comprar uma marca em particular, então as marcas não estão sendo usadas do mesmo jeito. Um laboratório de testes que derruba 25 pares de cada marca da mesma altura: um teste justo, em que só o acaso sobra. Um site que reúne os testes de queda de todos os laboratórios: a revisão do topo. Cada degrau acima tranca mais uma saída para o erro. Agora a pegadinha: um laboratório que derrubou dois pares fica abaixo de uma empresa de garantia com 50.000 devoluções, porque um degrau alto feito nas coxas fica abaixo de um degrau baixo feito com capricho. O degrau diz onde a pesagem começa, não onde termina. 😎

Conceito novo? Um exemplo do dia a dia faz clicar — novas analogias quando quiser.

Explicações de IA podem conter erros · Não é aconselhamento profissional

Definição formal — O mesmo termo, explicado da forma habitual

Níveis de evidência são hierarquias que classificam desenhos de estudo pela proteção esperada contra viés, usadas para localizar a provável melhor evidência para uma pergunta clínica e atribuir a ela uma nota inicial. Os Níveis de Evidência 2011 do Oxford Centre for Evidence-Based Medicine (OCEBM) (v2.1) são uma grade de sete tipos de pergunta contra cinco níveis; para benefícios de tratamento, o nível 1 é uma revisão sistemática de ensaios randomizados ou ensaios n-de-1, o nível 2 um ensaio randomizado ou um estudo observacional com efeito dramático, o nível 3 um estudo de coorte controlado não randomizado ou de acompanhamento, o nível 4 séries de casos, estudos caso-controle ou estudos com controles históricos, e o nível 5 raciocínio baseado em mecanismo. Um nível pode ser rebaixado por qualidade do estudo, imprecisão, evidência indireta, inconsistência ou um efeito absoluto muito pequeno, e promovido por um efeito grande ou muito grande. O documento introdutório do OCEBM afirma que os Níveis são uma hierarquia da provável melhor evidência e um atalho para a avaliação, não um julgamento definitivo de qualidade nem uma recomendação; o seu exemplo no PubMed («atrial fibrillation AND warfarin») retorna 2.175 artigos, dos quais 7 são ensaios randomizados, 366 estudos de coorte, 234 estudos caso-controle e 196 relatos de caso. Outros esquemas incluem a pirâmide de sete níveis de Melnyk usada na enfermagem, a pirâmide 6S de fontes pré-avaliadas e o GRADE, que classifica a certeza numa estimativa de efeito em vez de ordenar desenhos.

Quer que o Clicked explique termos como “level of evidence” direto no seu navegador, inclusive em PDFs?

Adicionar ao Chrome — Grátis

50 explicações grátis · Sem cartão de crédito