LongHarness prüft Evidenzverwaltung bei Agenten mit langem Kontext
Das Framework unterstützt Agentenantworten, indem es Belege und Schlussfolgerungen in langen Dokumenten gemeinsam aktualisiert.
Ereignis-/Datenzeitraum: 2026-10-09
Veröffentlicht: · Aktualisiert:
Forschende mit Verbindungen zu chinesischen Einrichtungen wie der Fudan University, dem Shanghai AI Laboratory und der Peking University stellten LongHarness vor. Das System verwaltet quellengebundene Belege in umfangreichen Dokumentensammlungen; wenn neue Belege eintreffen, aktualisiert es sowohl den Belegbestand als auch vorläufige Schlussfolgerungen.
Bei der Auswertung der ersten Version von OfficeQA Pro berichtet der Artikel mit GLM-5.3-Flash eine Exact-Match-Rate von 60,2 %. Die Autoren beschreiben einen deutlichen Anstieg gegenüber der direkten Modellnutzung; das Ergebnis gilt jedoch nur für den konstruierten Benchmark sowie das getestete Modell und Abrufverfahren. Es belegt keine gleiche Leistung in allen realen Workflows mit langem Kontext.
Daten
Forschungsergebnis
OfficeQA Pro V1; Benchmark mit etwa 100 Millionen Token; Exact Match
| Exact-Match-Rate von GLM-5.3-Flash auf OfficeQA Pro V1 | 60.2 | OfficeQA Pro V1; Benchmark mit etwa 100 Millionen Token; Exact Match |
Methodik
Der Wert ist auf das im Artikel beschriebene Benchmark-Experiment beschränkt; er ist kein Feldergebnis und keine allgemeine Leistungsgarantie.
Aktualisiert:
Themen und Orte
Themenvorschläge
- Wissenschaft, Technik, ForschungVorgeschlagene Kennzeichnung
- Preserved editorial category/topic; broad candidate onlyarxiv.org ↗
Geografische Angaben
Angezeigt werden nur geografische Angaben aus der Quelle. Eine externe Karte lässt sich optional öffnen. Optionale Karten in Artikeln nutzen OpenStreetMap. Beim Öffnen werden Ihre IP-Adresse und die Adresse dieser Website an den Kartenanbieter übermittelt. Ortsangaben bleiben auch ohne Karte als Text lesbar.
- China · Funktion des Ortes: Abdeckung · Art des Ortes: Land oder Gebiet · Ortsgenauigkeit: regionalBeleg
- Explicit preserved editorial country/region; no city or national centroid inferredarxiv.org ↗