Articles sur DEPBENCH
1 articles liés
Mise à jour de l'enfer : les agents de codage peuvent-ils survivre aux ruptures cachées lors des mises à niveau de dépendances ?
Update from Hell: Can Coding Agents Survive Hidden Breakage in Dependency Upgrades?
AI InsightLe benchmark DEPBENCH est le premier à évaluer systématiquement les performances des agents d'encodage dans des scénarios où les mises à niveau des dépendances cachent les dommages. Par rapport aux recherches existantes qui se concentrent sur les problèmes de compatibilité directe, elles se concentrent sur les changements implicites tels que les signatures de fonctions et les systèmes de types, révélant les risques de communication implicites que les agents peuvent rencontrer. Cela signifie que l’évaluation de la fiabilité des agents de codage est étendue à des scénarios de maintenance réels.Importance 70/100