DCCMAPI/CCET

Uma banca de PROPOSTA DE TESE/DISSERTAÇÃO de DOUTORADO foi cadastrada pelo programa.
DISCENTE: GILVAN VERAS MAGALHÃES JUNIOR
DATA: 19/04/2024
HORA: 14:00
LOCAL: Sala Prof. Pedro
TÍTULO: XRaySwinGen: Automatic Medical Reporting for X-ray Exams with Multimodal Model
PALAVRAS-CHAVES: Multimodal, Transformers, Medical Report, Computer Vision, Natural Language Processing
PÁGINAS: 49
GRANDE ÁREA: Ciências Exatas e da Terra
ÁREA: Ciência da Computação
SUBÁREA: Metodologia e Técnicas da Computação
ESPECIALIDADE: Sistemas de Informação
RESUMO: A importância da radiologia na medicina moderna é reconhecida por suas capacidades diagnósticas não invasivas; no entanto, a formulação manual de laudos médicos não estruturados impõe restrições de tempo e riscos de erro. Este estudo aborda a limitação comum das aplicações de Inteligência Artificial na legenda de imagens médicas, que geralmente se concentram em problemas de classificação, carecendo de informações detalhadas sobre a condição do paciente. Apesar dos avanços nos pré-laudos médicos gerados por IA que incorporam detalhes descritivos de imagens de raios-X, essenciais para laudos abrangentes, o desafio persiste. A solução proposta envolve um modelo multimodal que utiliza Visão Computacional para representação de imagens e Processamento de Linguagem Natural para geração de pré-laudos textuais. Uma contribuição notável é o uso inovador do Swin Transformer como codificador de imagens, possibilitando o mapeamento hierárquico e a percepção aprimorada do modelo sem um aumento significativo nos parâmetros ou custos computacionais. O modelo incorpora o GPT-2 como decodificador textual, integrando camadas de atenção cruzada e treinamento bilíngue com conjuntos de dados em Português PT-BR ou Inglês. Resultados promissores são observados no dataset proposto, com ROUGE-L 0.748, METEOR 0.741 e NIH CHEST X-ray com ROUGE-L 0.404 e METEOR 0.393.
MEMBROS DA BANCA:
Presidente - 470.564.523-53 - PEDRO DE ALCANTARA DOS SANTOS NETO
Interno - 579.300.403-30 - KELSON RÔMULO TEIXEIRA AIRES
Interno - 641.754.563-68 - RODRIGO DE MELO SOUZA VERAS
Externo à Instituição - ANTÓNIO MANUEL TRIGUEIROS DA SILVA CUNHA - UTAD
Externo à Instituição - CLAUDIO DE SOUZA BAPTISTA - UFCG
Co-orientador - 407686 - ANSELMO CARDOSO DE PAIVA