Articles sur Laya
1 articles liés
Modèles rapides, preuves lentes : une évaluation appariée et auto-auditée des modèles de décision du système 1 pour les harnais LLM Agent
Fast Models, Slow Evidence: A Paired and Self-Audited Evaluation of System-1 Decision Models for LLM Agent Harnesses
AI InsightLes frameworks d'Agent IA tentent de remplacer les appels coûteux aux LLM par un modèle de type System-1 à passage avant unique. Les évaluations montrent que les modèles hébergés présentent des avantages évidents sur la plupart des points de décision, mais qu'en mode zéro-shot, aucun d'entre eux ne dépasse la probabilité aléatoire, ce qui indique qu'un réglage fin spécialisé est essentiel pour garantir la fiabilité des micro-décisions de l'Agent.