Benchmark da MBZUAI testa raciocínio espacial em IA médica 3D
O benchmark CT-SpatialVQA da MBZUAI testa como modelos médicos identificam relações espaciais em exames de TC.
Período do evento/dos dados:
Publicado: · Atualizado:
Investigadores da MBZUAI desenvolveram o CT-SpatialVQA, um benchmark que testa se sistemas de IA médica 3D acompanham as relações espaciais entre a anatomia e anomalias em volumes de tomografia computorizada (TC). Segundo uma notícia da universidade de 19 de outubro, o conjunto contém 9.077 pares de perguntas e respostas espaciais derivados de 1.601 exames de TC do tórax e respetivos relatórios radiológicos.
Os investigadores avaliaram oito modelos de visão e linguagem num cenário zero-shot. Nenhum atingiu 50% de precisão e a média dos oito foi 34,08%. O CT-Chat obteve 43,69%, o MedEvalKit 40,16%, o MedGemma-1.5 38,24% e o VILA-M3 28,20%. O trabalho foi aceite como apresentação oral na MICCAI 2026. Estes resultados pertencem a um benchmark de investigação específico; não demonstram competência clínica nem utilização validada nos cuidados a doentes.
Dados
Resultados de precisão dos modelos no CT-SpatialVQA
Resultados selecionados e média geral da avaliação universitária de oito modelos.
| CT-Chat | 43.69 | por cento |
| MedEvalKit | 40.16 | por cento |
| MedGemma-1.5 | 38.24 | por cento |
| VILA-M3 | 28.2 | por cento |
| Média dos oito modelos | 34.08 | por cento |
Metodologia
São resultados de precisão zero-shot no benchmark CT-SpatialVQA. A média inclui oito modelos; a tabela apresenta quatro modelos discriminados pela fonte e a média. Não se trata de validação clínica.
Atualizado:
Conjunto de dados CT-SpatialVQA
Cobertura de perguntas e exames no benchmark.
| Pares de perguntas e respostas espaciais | 9077 | quantidade |
| Exames de tomografia computadorizada do tórax | 1601 | quantidade |
Metodologia
Os valores descrevem o benchmark de investigação, não uma população de doentes, desempenho diagnóstico ou resultados clínicos. A fonte afirma que as 9.077 perguntas derivam de 1.601 exames torácicos e relatórios radiológicos do conjunto de teste.
Atualizado:
Temas e lugares
Sugestões de temas
- Inteligência artificialAnotação sugerida
- Subject suggested from the title or summary: AImbzuai.ac.ae ↗
- SaúdeAnotação sugerida
- Subject suggested from the title or summary: medicalmbzuai.ac.ae ↗
Referências geográficas
São exibidas apenas referências geográficas fornecidas pela fonte. Abrir um mapa externo é opcional. Os mapas opcionais das notícias usam o OpenStreetMap. Ao abrir um mapa, seu endereço IP e o endereço deste site são enviados ao provedor do mapa. Os dados de localização continuam disponíveis em texto sem carregar o mapa.
- Emirados Árabes Unidos · Função do lugar: Cobertura · Tipo de lugar: país ou área · Precisão da localização: regionalEvidência
- Explicit preserved editorial country/region; no city or national centroid inferredmbzuai.ac.ae ↗