NeFut Logo NeFut
EN 管理员登录

[AI学术] DuplexAgent-RSI:递归式改进全双工语音代理协作框架

发布于:2026-10-09 22:00 最后更新:2026-10-12 00:49
#AI #Machine Learning #LLM

全双工语音代理正向一种协作模式收敛:实时通道保持持续的听说,而搜索、推理和编码通过异步委派完成。全双工模型能够连续监听和发声,但面对复杂推理和工具使用时往往力不从心;而编码代理能够规划并执行长时任务,却因顺序交互不适合实时对话。为此需要一个协调任务接受、进度、取消、替换和结果交付的外壳(harness),并在对话保持响应的前提下完成协作。现有外壳多依赖耦合启发式,难以基于证据系统化改进。DuplexAgent 将工作流抽象为六个可编辑模块,并引入 Duplex‑Harness‑RSI(Recursive Self‑Improvement)闭环:

  1. 模拟器自动生成带时间戳的测试对话,运行系统并输出失败追踪,定位需要修复的模块。
  2. 考试规划器依据观察到的薄弱环节和修复档案挑选下一批测试。
  3. 外壳编辑器利用推理 LLM 与编码代理提出针对性的模块修改。

上述三者共同构成自我改进循环,使提升用户能力的同事也提升系统协同能力。实验在智能、代理和全双工基准上表明,DuplexAgent 能在保持强中断响应的同时,实现比传统委派系统更高的口语知识得分和可执行工具得分。进一步的外壳消融实验显示,带诊断与修复档案的模块化循环优于仅靠重复编辑的初始外壳。

点评

原文链接: https://arxiv.org/abs/2610.11299

[h] 返回首页