Quem responde quando a IA erra?

O mundo é digital

Quem responde quando a IA erra?
Quem responde quando a IA erra?

Analista de Sistemas no UNIARAXÁ, Analista de Mídias Sociais, Desenvolvedor de Sites e Aplicações Web e Empreendedor na Agência Digital WebCódigo. Graduado em Sistemas de Informação e pós-graduado em Banco de dados e Gestão de Projetos. contato@webcodigo.com

Quem responde quando a IA erra?

*Aron Hussid Ferreira

Os sistemas de inteligência artificial já fazem parte da realidade de milhões de brasileiros. Em hospitais, organizam filas, fazem triagem, apontam alterações em exames de imagem, transcrevem consultas e auxiliam a decisão clínica. Afinal, vamos confiar num sistema que promete acurácia ou num médico cansado, que precisa olhar uma radiografia de tórax às 3h da manhã e decidir se aquela tosse é um simples resfriado, uma pneumonia ou até um câncer de pulmão?

Mas e quando falham? Quem vamos culpar quando a I.A. definir um nódulo como benigno e meses depois o paciente retornar com um câncer metastático, sem possibilidade de cura? O médico, que confiou no laudo? A instituição que adotou o sistema? A empresa que o vende? Ou o programador que criou a lógica a partir de dados falhos?

A legislação brasileira ainda é falha a respeito do tema. Na área médica, o Conselho Federal de Medicina liberou uma resolução no início deste ano normatizando o uso da I.A. na medicina, deixando a responsabilidade final sobre o médico. Faz sentido, porque a decisão clínica precisa de alguém que a assuma.

human-in-the-loop, ou seja, manter um humano ativo na decisão, ainda é o preferido pelos mais cautelosos. O sistema processa, calcula, recomenda, mas a palavra final fica sempre com uma pessoa, que pode confirmar ou descartar. O problema é o viés de automação. Diante de um sistema que acerta muito, o humano tende a aceitar sem questionar. É algo parecido com um segurança fazendo revista na entrada de um estádio e, depois de centenas de revistas negativas, começa a deixar os torcedores entrarem de forma desleixada.

Nem as empresas por trás dos principais modelos entendem o passo a passo de como seus sistemas chegam àquelas decisões. Exigir que um radiologista audite linha por linha um modelo de aprendizado profundo seria o mesmo que pedir para ele desmontar e remontar um tomógrafo antes de cada laudo.

Precisamos de um meio-termo entre proibir a tecnologia e usá-la sem freio. Na Europa, as I.As médicas são regulamentadas como produto de alto risco. O Brasil precisa de regras parecidas, discutidas e desenhadas por profissionais de diversas áreas.

O algoritmo deve ser tratado como um estudante de medicina brilhante, mas apressado: ele ajuda muito, às vezes falha, e nunca substitui o médico experiente que conhece o paciente como pessoa. Quando a máquina falha, quem recebe a conta é gente de carne e osso. Já passou da hora de decidir quem mais deveria recebê-la.

* Médico, pesquisador e professor da USP, Aron Hussid Ferreira também é autor de “POTUS.EXE: Quando a democracia elege um algoritmo”, que reflete sobre os impactos da I.A. no futuro da sociedade

 

O mundo é digital

Analista de Sistemas no UNIARAXÁ, Analista de Mídias Sociais, Desenvolvedor de Sites e Aplicações Web e Empreendedor na Agência Digital WebCódigo. Graduado em Sistemas de Informação e pós-graduado em Banco de dados e Gestão de Projetos. contato@webcodigo.com

Mais postagens da coluna - O mundo é digital

Óculos que “viram computador”: 5 ajustes de gestão que PMEs precisam fazer antes da próxima onda da IA

Óculos que “viram computador”: 5 ajustes de gestão que PMEs precisam fazer antes da próxima onda da IA

Alexsandro Luiz de Assis 13/07/2026
A maior revolução da IA não está na tecnologia, está nas pessoas

A maior revolução da IA não está na tecnologia, está nas pessoas

Alexsandro Luiz de Assis 26/05/2026
Encíclica do papa sobre IA mostra necessidade de aprender a utilizá-la de maneira ética

Encíclica do papa sobre IA mostra necessidade de aprender a utilizá-la de maneira ética

Alexsandro Luiz de Assis 25/05/2026
A inteligência preditiva como nova fronteira da resiliência digital

A inteligência preditiva como nova fronteira da resiliência digital

Alexsandro Luiz de Assis 06/05/2026
Copa do Mundo promete ser a mais tecnológica da história

Copa do Mundo promete ser a mais tecnológica da história

Alexsandro Luiz de Assis 18/03/2026
IA: Quem controla os controladores?

IA: Quem controla os controladores?

Alexsandro Luiz de Assis 27/02/2026
2026: como será a interdependência humano-máquina?

2026: como será a interdependência humano-máquina?

Alexsandro Luiz de Assis 12/01/2026
4 passos para aumentar as vendas na internet

4 passos para aumentar as vendas na internet

Alexsandro Luiz de Assis 29/12/2025
Quando a inteligência artificial alucina

Quando a inteligência artificial alucina

Alexsandro Luiz de Assis 19/12/2025
Morada.AI recebe aporte de R$ 17 mi e lidera transformação de IA no mercado imobiliário

Morada.AI recebe aporte de R$ 17 mi e lidera transformação de IA no mercado imobiliário

Alexsandro Luiz de Assis 12/12/2025
Crescem os golpes digitais: como o público 50+ pode se proteger nas transações online e no uso do PIX

Crescem os golpes digitais: como o público 50+ pode se proteger nas transações online e no uso do PIX

Alexsandro Luiz de Assis 21/10/2025
Como a vida digital molda nossas relações e aprendizados

Como a vida digital molda nossas relações e aprendizados

Alexsandro Luiz de Assis 06/10/2025