FrontiersMind, 27 milyar parametreli Lumma-Fev karar modelini yayımladı
Model, serbest metin yerine sunulan seçenekler arasında karar veriyor; geliştiricisi 4.454 test örneğinde yüzde 90,7 doğruluk bildirdi.
Olay / veri dönemi:
Yayın: · Güncelleme:
FrontiersMind, 14 Ekim’de Lumma-Fev-27B modelini yayımladı. Karar modeli bir durum ve seçenekleri alıp serbest metin yerine seçilen etiketi ve seçenek olasılıklarını döndürüyor. Geliştirici, tüm ağırlıkların yaklaşık 100 bin örnekle eğitildiğini ve İngilizce, Hintçe, Tamilce ve Kannadaca desteği bulunduğunu söylüyor.
Geliştiricinin 4.454 ayrılmış karar örneğinde yaptığı testte Lumma-Fev-27B yüzde 90,7; TypeSafe Jev yüzde 83,9 doğruluk aldı. Bildirilen kalibrasyon hataları 0,009 ve 0,045’ti. Geliştirici, BBH ve WinoGrande gibi daha genel akıl yürütme testlerinde Jev’in önde olduğunu da belirtiyor. Sonuçlar geliştirici testidir, bağımsız değerlendirme değildir.
Veriler
FrontiersMind, 27 milyar parametreli Lumma-Fev karar modelini yayımladı
- · Gerçekleşti
FrontiersMind, 27 milyar parametreli Lumma-Fev karar modelini yayımladı
Model, serbest metin yerine sunulan seçenekler arasında karar veriyor; geliştiricisi 4.454 test örneğinde yüzde 90,7 doğruluk bildirdi.
Yöntem
Bu yapılandırılmış kayıt, belirtilen duyuruyu özetler; bağımsız performans doğrulaması değildir.
Güncelleme:
Konular ve yerler
Konu önerileri
- Bilim ve teknolojiÖneri
- Preserved editorial category/topic; broad candidate onlyhuggingface.co ↗