# Le benchmark AgentSWE évalue ce que les agents de programmation livrent réellement

> Le préprint arXiv définit 25 tâches couvrant la création d’agents, la modification de code existant et l’optimisation vers un objectif.

- URL canonique: https://newsverum.com/fr/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026
- Éditeur: Newsverum
- Rubrique: Technologie
- Pays: Chine
- Publié: 2026-10-13T10:04:09+00:00
- Mis à jour: 2026-10-13T10:04:09+00:00
- Période de l’événement / des données: 2026-10-09
- Autres éditions: [Türkçe](https://newsverum.com/tr/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md), [English](https://newsverum.com/en/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md), [العربية](https://newsverum.com/ar/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md), [Español](https://newsverum.com/es/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md), [Deutsch](https://newsverum.com/de/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md), [Português](https://newsverum.com/pt/news/agentswe-coding-agent-benchmark-requirement-fidelity-2026.md)

Des chercheurs affiliés à l’Académie de Pékin pour l’intelligence artificielle et à des institutions partenaires ont publié AgentSWE, un benchmark destiné à mesurer si un agent de programmation crée un autre agent conforme à une exigence en langage naturel. Le préprint arXiv daté du 9 octobre couvre 25 tâches réparties en trois étapes : créer un agent, modifier des bases de code d’agents en production et optimiser un résultat mesurable. Le constructeur travaille sur quelques exemples indicatifs; la version livrée est ensuite évaluée sur des cas retenus à part, selon des critères tirés des exigences.

Les auteurs indiquent qu’aucune des combinaisons de modèles et de cadres évaluées n’a approché le résultat demandé par les exigences. Leur analyse relève notamment le surapprentissage aux exemples visibles, des environnements d’exécution qui ne font pas le travail promis et des déclarations d’achèvement sans preuve. Le benchmark vérifie donc le fonctionnement de l’agent construit plutôt que l’apparence d’achèvement de son code. Ces constats sont propres aux 25 tâches de recherche et aux protocoles du préprint; ils ne donnent pas un taux d’échec universel pour les agents de programmation ou les déploiements en production.

## Données

### Nombres de tâches et d’étapes d’AgentSWE dans le préprint

Nombre de tâches et d’étapes du cycle de vie définissant le périmètre du benchmark.

Méthodologie: L’article répartit 25 tâches entre création, modification et optimisation; ces nombres concernent uniquement ce benchmark de recherche.

| Mesure | Valeur |
|---|---|
| Tâches AgentSWE | 25 |
| Étapes de création, modification et optimisation | 3 |

Sources: <https://arxiv.org/abs/2610.13361> · Télécharger les données: [JSON](https://newsverum.com/api/v1/articles/agentswe-coding-agent-benchmark-requirement-fidelity-2026/data/benchmark-scope-counts?lang=fr&format=json) · [CSV](https://newsverum.com/api/v1/articles/agentswe-coding-agent-benchmark-requirement-fidelity-2026/data/benchmark-scope-counts?lang=fr&format=csv)

## Sources

- [arXiv preprint by researchers affiliated with Beijing Academy of Artificial Intelligence, Institute of Automation of the Chinese Academy of Sciences and Renmin University of China](<https://arxiv.org/abs/2610.13361>) (Source vérifiée: 2026-10-13; Publié: 2026-10-09)

---

Citez l’URL canonique ci-dessus. [Principes éditoriaux et corrections](https://newsverum.com/fr/editorial)