Des chercheurs brésiliens évaluent des piles technologiques pour agents d’IA
Une étude de NIC.br et de PUC-SP a testé trois modèles, trois protocoles et quatre cadres sur 300 tâches Mind2Web.
Période de l’événement / des données: 2026-10-09
Publié: · Mis à jour:
Des chercheurs de NIC.br et de PUC-SP ont publié le 9 octobre une étude présentant MASTIF, un cadre destiné à comparer des combinaisons de technologies pour les systèmes multi-agents. L’évaluation a croisé trois modèles de langage, trois protocoles de communication et quatre cadres d’implémentation sur 300 tâches du benchmark Mind2Web.
L’article rapporte des écarts selon les mesures — taux d’achèvement, durée, concision, usage des outils et stabilité des valeurs sociales — sans qu’une seule combinaison soit la meilleure partout. Les auteurs soulignent les limites des tâches et des modèles étudiés. Ces résultats constituent un point de référence expérimental et ne garantissent pas les performances d’agents en situation réelle.
Données
Périmètre de l’étude
300 tâches Mind2Web ; échantillon de l’expérience MASTIF
| Nombre de tâches évaluées du benchmark Mind2Web | 300 | 2026-10-09 |
Méthodologie
Nombre indiqué par l’article pour le périmètre expérimental ; ce n’est ni une statistique nationale ni un résultat de terrain.
Mis à jour:
Sujets et lieux
Sujets proposés
- Intelligence artificielleProposé
- Subject suggested from the title or summary: AIarxiv.org ↗
Références géographiques
Seules les références géographiques présentes dans la source sont affichées. L’ouverture d’une carte externe est facultative. Les cartes facultatives utilisent OpenStreetMap. Leur ouverture transmet votre adresse IP et celle de ce site au fournisseur ; les coordonnées restent lisibles sans charger la carte.
- Brésil · Rôle du lieu: Couverture · Type de lieu: Pays ou territoire · Précision de localisation: RégionaleÉléments probants
- Explicit preserved editorial country/region; no city or national centroid inferredarxiv.org ↗