近期,研究者提出了一种名为SkillShapley的框架,用于估计LLM智能体技能步骤的贡献度。该框架通过两个阶段运作:首先识别出具有信息量的联盟区域,然后自适应地采样新的联盟以获得可重用的边际证据。实验结果表明,SkillShapley可以有效地识别出高价值或低价值的技能步骤,对于智能体技能的创建具有重要意义。 SkillShapley的提出解决了现有智能体技能创建方法的局限性,即缺乏对个体步骤贡献度的量化。通过 SkillShapley,研究者可以更好地理解每个步骤对整体技能性能的影响,从而优化技能的创建过程。 博主点评: SkillShapley 框架为智能体技能步骤的归因提供了一个新的视角,通过边界自适应的Shapley估值,可以更准确地评估每个步骤的贡献度,对于智能体技能的创建和优化具有重要的参考价值。