O que a "acurácia" esconde | Por dentro da IA

Acurácia é a proporção total de acertos, e é justamente por isso que ela engana. O número depende de quão comum a doença é: numa condição rara, um modelo que responde "não tem" para todo mundo acerta a maioria das vezes e exibe acurácia altíssima, sendo inútil. Um anúncio de 95% de acurácia, sozinho, não diz o que a ferramenta faz. O valor preditivo positivo muda com a prevalência: pode ser de 90% numa população de alta prevalência e cair para 30% numa população de baixa prevalência. O que orienta a leitura clínica é o valor preditivo na população em que a ferramenta será usada, não a acurácia global. Perguntar em que prevalência o número foi medido informa mais do que comparar percentuais entre produtos. O episódio explica a medida; não avalia ferramenta. Episódio 13 do programa Por dentro da IA. Página do episódio, com transcrição completa e referências: [LINK DA PÁGINA] Referências: 1. Altman DG, Bland JM. Diagnostic tests 2: predictive values. BMJ. 1994;309(6947):102. https://doi.org/10.1136/bmj.309.6947.102 Por dentro da IA é a série de bolso da TV Naveg, o canal de educação médica do NAVEG sobre robótica e inteligência artificial na cirurgia ginecológica: um conceito por episódio, em formato mito x fato. Apresentação: TV Naveg. Conteúdo educativo destinado a profissionais de saúde. A evidência informa; a decisão é do médico, com a sua paciente.