Artigo

CHART: o diagrama de fluxo metodológico precisa ser usado (carta no IJS)

Carta ao editor dos autores do CHART (Chatbot Assessment Reporting Tool), a diretriz de reporte para estudos de conselhos de saúde dados por chatbots de IA generativa. Os autores defendem que, além do checklist de 12 itens, o diagrama de fluxo metodológico seja incluído nos manuscritos, pois ele resume em uma figura o modelo, o prompt engineering, as consultas, a avaliação e a reprodutibilidade. Pedem que editores e revisores exijam checklist e diagrama juntos, e ilustram o uso com um estudo sobre recomendações cirúrgicas para DRGE.

Referência

Autores: Huo B, Cacciamani GE, Collins GS, Guyatt G
Ano: 2026
Venue: International Journal of Surgery (Research Letter, acesso aberto, CC BY-ND 4.0)
DOI / URL: https://doi.org/10.1097/JS9.0000000000005729

Problema e Contexto

O CHART (Chatbot Assessment Reporting Tool) foi publicado como diretriz de reporte para estudos de conselhos de saúde de chatbots (CHA studies), isto é, estudos que avaliam se chatbots de IA generativa resumem a evidência clínica com precisão e dão conselhos confiáveis. Ele traz um checklist de 12 itens e um diagrama de fluxo metodológico. Segundo os autores, o checklist vem sendo adotado (105 citações até a redação da carta), mas muitos relatos trazem o diagrama incompleto ou o omitem, o que reduz a transparência e atrapalha a avaliação crítica.

Hipótese / Objetivo

Argumentar que o diagrama de fluxo do CHART deve ser usado de forma rotineira, junto com o checklist. Os autores apoiam isso em evidência de que diagramas de fluxo estão associados a reporte mais completo em ensaios randomizados e revisões sistemáticas, e a avaliação mais clara de generalização e validade.

Método

Carta ao editor, sem coleta de dados. O argumento é ilustrado com a aplicação do diagrama a um estudo já publicado que comparou a acurácia de recomendações cirúrgicas para doença do refluxo gastroesofágico (DRGE) entre um modelo ChatGPT-4o ajustado (gpt-4o-2024-05-13) e o modelo base.

O diagrama cobre cinco componentes:

Modelo de IA generativa
Prompt engineering
Estratégia de consulta (query)
Avaliação de desempenho
Reprodutibilidade

Resultados Principais

No exemplo da DRGE, o diagrama permite ver de relance:

2 chatbots fechados (closed-source), um deles ajustado, acessado por assinatura mensal
1 clínico responsável pelo prompt engineering, com 1 única fonte de informação (uma diretriz de manejo da DRGE)

-...