MBZUAI-Benchmark prüft räumliches Denken medizinischer 3D-KI
Der CT-SpatialVQA-Benchmark der MBZUAI prüft, wie medizinische KI räumliche Beziehungen in CT-Aufnahmen erfasst.
Ereignis-/Datenzeitraum:
Veröffentlicht: · Aktualisiert:
Forschende der MBZUAI entwickelten CT-SpatialVQA, einen Benchmark zur Prüfung, ob medizinische 3D-KI-Systeme räumliche Beziehungen zwischen Anatomie und Auffälligkeiten in Computertomografie-Volumendaten erfassen. Laut einem Hochschulbeitrag vom 19. Oktober umfasst der Datensatz 9.077 räumlich fundierte Frage-Antwort-Paare aus 1.601 Thorax-CT-Aufnahmen und radiologischen Befunden.
Die Forschenden prüften acht Vision-Language-Modelle ohne aufgabenspezifische Beispiele. Keines erreichte 50 Prozent Genauigkeit; der Durchschnitt lag bei 34,08 Prozent. CT-Chat erzielte 43,69 Prozent, MedEvalKit 40,16 Prozent, MedGemma-1.5 38,24 Prozent und VILA-M3 28,20 Prozent. Die Arbeit wurde als mündlicher Beitrag für MICCAI 2026 angenommen. Dies sind Ergebnisse eines bestimmten Forschungsbenchmarks; sie belegen weder klinische Kompetenz noch einen validierten Einsatz in der Patientenversorgung.
Daten
Genauigkeit der Modelle bei CT-SpatialVQA
Ausgewählte Ergebnisse und Gesamtdurchschnitt aus der Prüfung von acht Modellen durch die Universität.
| CT-Chat | 43.69 | Prozent |
| MedEvalKit | 40.16 | Prozent |
| MedGemma-1.5 | 38.24 | Prozent |
| VILA-M3 | 28.2 | Prozent |
| Durchschnitt der acht Modelle | 34.08 | Prozent |
Methodik
Dies sind Zero-Shot-Genauigkeitswerte des CT-SpatialVQA-Benchmarks. Der Durchschnitt umfasst acht Modelle; die Tabelle zeigt vier einzeln genannte Modelle und den Durchschnitt. Es handelt sich nicht um eine klinische Validierung.
Aktualisiert:
CT-SpatialVQA-Datensatz
Umfang der Fragen und Aufnahmen im Forschungsbenchmark.
| Räumliche Frage-Antwort-Paare | 9077 | Anzahl |
| Thorax-CT-Aufnahmen | 1601 | Anzahl |
Methodik
Die Zahlen beschreiben den Forschungsbenchmark, keine Patientenpopulation, Diagnoseleistung oder klinischen Behandlungsergebnisse. Laut Quelle wurden die 9.077 Fragen aus 1.601 Thorax-CT-Aufnahmen und Befunden im Testsatz abgeleitet.
Aktualisiert:
Themen und Orte
Themenvorschläge
- Künstliche IntelligenzVorgeschlagene Kennzeichnung
- Subject suggested from the title or summary: AImbzuai.ac.ae ↗
- Medizin, GesundheitVorgeschlagene Kennzeichnung
- Subject suggested from the title or summary: medicalmbzuai.ac.ae ↗
Geografische Angaben
Angezeigt werden nur geografische Angaben aus der Quelle. Eine externe Karte lässt sich optional öffnen. Optionale Karten in Artikeln nutzen OpenStreetMap. Beim Öffnen werden Ihre IP-Adresse und die Adresse dieser Website an den Kartenanbieter übermittelt. Ortsangaben bleiben auch ohne Karte als Text lesbar.
- Vereinigte Arabische Emirate · Funktion des Ortes: Abdeckung · Art des Ortes: Land oder Gebiet · Ortsgenauigkeit: regionalBeleg
- Explicit preserved editorial country/region; no city or national centroid inferredmbzuai.ac.ae ↗