A FrontiersMind publica o modelo de decisão Lumma-Fev com 27 mil milhões de parâmetros
O modelo escolhe entre opções fornecidas em vez de gerar texto; o programador relatou 90,7% de precisão em 4.454 exemplos.
Período do evento/dos dados:
Publicado: · Atualizado:
A FrontiersMind publicou o Lumma-Fev-27B em 14 de outubro. O modelo de decisão recebe um estado e um conjunto de escolhas e devolve uma etiqueta e probabilidades, em vez de texto livre. O programador afirma ter treinado todos os pesos com cerca de 100 mil exemplos e indica suporte para inglês, hindi, tâmil e canarês.
No teste do programador com 4.454 decisões reservadas, o Lumma-Fev-27B obteve 90,7% de precisão, contra 83,9% do TypeSafe Jev; os erros de calibração comunicados foram 0,009 e 0,045. O programador afirma que o Jev continua à frente em testes de raciocínio mais gerais, como BBH e WinoGrande. São resultados do programador, não uma avaliação independente.
Dados
A FrontiersMind publica o modelo de decisão Lumma-Fev com 27 mil milhões de parâmetros
- · ocorrido
A FrontiersMind publica o modelo de decisão Lumma-Fev com 27 mil milhões de parâmetros
O modelo escolhe entre opções fornecidas em vez de gerar texto; o programador relatou 90,7% de precisão em 4.454 exemplos.
Metodologia
Este registo resume o anúncio citado; não é uma avaliação independente do desempenho.
Atualizado:
Temas e lugares
Sugestões de temas
- Ciência e tecnologiaAnotação sugerida
- Preserved editorial category/topic; broad candidate onlyhuggingface.co ↗