Acessibilidade / Reportar erro
Ordenar publicações por
Radiologia Brasileira, Volume: 57, Publicado: 2024
  • Desempenho do ChatGPT nas questões da avaliação anual de residentes do Colégio Brasileiro de Radiologia Artigo Original

    Leitão, Cleverson Alex; Salvador, Gabriel Lucca de Oliveira; Rabelo, Leda Maria; Escuissato, Dante Luiz

    Resumo em Português:

    Resumo Objetivo: Testar o desempenho do ChatGPT em questões de radiologia formuladas pelo Colégio Brasileiro de Radiologia (CBR), avaliando seus erros e acertos. Materiais e Métodos: 165 questões da avaliação anual dos residentes do CBR (2018, 2019 e 2022) foram apresentadas ao ChatGPT. Elas foram divididas, para análise estatística, em questões que avaliavam habilidades cognitivas de ordem superior ou inferior e de acordo com a subespecialidade, o tipo da questão (descrição de um achado clínico ou sinal, manejo clínico de um doente, aplicação de um conceito, cálculo ou classificação dos achados descritos, associação entre doenças ou anatomia) e o ano da residência (R1, R2 ou R3). Resultados: O ChatGPT acertou 53,3% das questões (88/165). Houve diferença estatística entre o desempenho em questões de ordem cognitiva inferior (64,4%; 38/59) e superior (47,2%; 50/106) (p = 0,01). Houve maior índice de acertos em física (90,0%; 18/20) do que em questões clínicas (48,3%; 70/145) (p = 0,02). Não houve diferença significativa de desempenho entre subespecialidades ou ano de residência (p > 0,05). Conclusão: Mesmo sem treinamento dedicado a essa área, o ChatGPT apresenta desempenho razoável, mas ainda insuficiente para aprovação, em questões de radiologia formuladas pelo CBR.

    Resumo em Inglês:

    Abstract Objective: To test the performance of ChatGPT on radiology questions formulated by the Colégio Brasileiro de Radiologia (CBR, Brazilian College of Radiology), evaluating its failures and successes. Materials and Methods: 165 questions from the CBR annual resident assessment (2018, 2019, and 2022) were presented to ChatGPT. For statistical analysis, the questions were divided by the type of cognitive skills assessed (lower or higher order), by topic (physics or clinical), by subspecialty, by style (description of a clinical finding or sign, clinical management of a case, application of a concept, calculation/classification of findings, correlations between diseases, or anatomy), and by target academic year (all, second/third year, or third year only). Results: ChatGPT answered 88 (53.3%) of the questions correctly. It performed significantly better on the questions assessing lower-order cognitive skills than on those assessing higher-order cognitive skills, providing the correct answer on 38 (64.4%) of 59 questions and on only 50 (47.2%) of 106 questions, respectively (p = 0.01). The accuracy rate was significantly higher for physics questions than for clinical questions, correct answers being provided for 18 (90.0%) of 20 physics questions and for 70 (48.3%) of 145 clinical questions (p = 0.02). There was no significant difference in performance among the subspecialties or among the academic years (p > 0.05). Conclusion: Even without dedicated training in this field, ChatGPT demonstrates reasonable performance, albeit still insufficient for approval, on radiology questions formulated by the CBR.
  • Análise das indicações e resultados da ressonância magnética para rastreamento de câncer de mama em um centro oncológico brasileiro Artigo Original

    Zoghbi, Karina Kuhl; Felipe, Vinicius Cardona; Graziano, Luciana; Guatelli, Camila Souza; Souza, Juliana Alves de; Bitencourt, Almir Galvão Vieira

    Resumo em Português:

    Resumo Objetivo: Avaliar as indicações e resultados de exames de ressonância magnética (RM) para rastreamento de câncer de mama em um centro oncológico no Brasil. Materiais e Métodos: Estudo observacional, realizado mediante análise retrospectiva de pacientes submetidos a RM das mamas para rastreamento de câncer de mama, por meio de revisão do prontuário eletrônico em um centro oncológico. Resultados: Foram incluídas 597 pacientes com idade variando de 19 a 82 anos. As principais indicações para rastreamento foram história pessoal de câncer de mama em 354 (59,3%) pacientes, história familiar em 102 (17,1%) e mutação genética confirmada em 67 (11,2%). O resultado da RM foi benigno (BI-RADS 1 ou 2) em 425 (71,2%) pacientes, provavelmente benigno (BI-RADS 3) em 143 (24,0%) e suspeito (BI-RADS 4 ou 5) em 29 (4,9%). Foram identificados 11 tumores malignos na RM, todos carcinomas invasivos, porcentagem de cânceres “mínimos” (< 1 cm) de 54,5% e porcentagem de axila negativa de 90,9%. A taxa de detecção de câncer na RM foi 18,4/1000 exames e o valor preditivo positivo para as lesões suspeitas submetidas a biópsia foi 37,9%. Conclusão: A principal indicação para RM de rastreamento na nossa população foi história pessoal de câncer de mama. Os resultados mostraram que a RM constitui um método com alta acurácia para detecção precoce de neoplasias da mama nessa população.

    Resumo em Inglês:

    Abstract Objective: To evaluate the indications for and results of magnetic resonance imaging (MRI) examinations for breast cancer screening at a cancer center in Brazil. Materials and Methods: This was a retrospective observational study, based on electronic medical records, of patients undergoing MRI for breast cancer screening at a cancer center in Brazil. Results: We included 597 patients between 19 and 82 years of age. The main indications for MRI screening were a personal history of breast cancer, in 354 patients (59.3%), a family history of breast cancer, in 102 (17.1%), and a confirmed genetic mutation, in 67 (11.2%). The MRI result was classified, in accordance with the categories defined in the Breast Imaging Reporting and Data System, as benign (category 1 or 2), in 425 patients (71.2%), probably benign (category 3), in 143 (24.0%), or suspicious (category 4 or 5), in 29 (4.9%). On MRI, 11 malignant tumors were identified, all of which were invasive carcinomas. Among those 11 carcinomas, six (54.5%) were categorized as minimal cancers (< 1 cm), and the axillary lymph nodes were negative in 10 (90.9%). The cancer detection rate was 18.4/1,000 examinations, and the positive predictive value for suspicious lesions submitted to biopsy was 37.9%. Conclusion: In our sample, the main indication for breast MRI screening was a personal history of breast cancer. The results indicate that MRI is a highly accurate method for the early detection of breast neoplasms in this population.
Publicação do Colégio Brasileiro de Radiologia e Diagnóstico por Imagem Av. Paulista, 37 - 7º andar - conjunto 71, 01311-902 - São Paulo - SP, Tel.: +55 11 3372-4541, Fax: 3285-1690, Fax: +55 11 3285-1690 - São Paulo - SP - Brazil
E-mail: radiologiabrasileira@cbr.org.br