Articles sur DuplexSpeechBench-IFEval
1 articles liés
DuplexSpeechBench-IFEval : évaluation du suivi des instructions implicites dans les agents vocaux full-duplex
DuplexSpeechBench-IFEval: Evaluating Implicit Instruction Following in Full-Duplex Voice Agents
AI InsightDSB-IFEval signifie que l'évaluation des agents vocaux passe d'instructions explicites à une compréhension implicite des indices de rôle. Le nouveau benchmark utilise 1 038 cas d'utilisation couvrant huit rôles pour tenter de quantifier la capacité d'un agent à « déduire un comportement à partir d'une personnalité », ce qui reflète le fait que les systèmes de dialogue full-duplex passent d'une interaction basée sur des règles à une interaction personnifiée.Importance 50/100