NeFut Logo NeFut
EN 管理员登录

[AI学术] SignTrace:描述手势,寻找词语

发布于:2026-09-29 22:00 最后更新:2026-09-30 01:41
#AI #Machine Learning #LLM

SignTrace 通过自然语言接口将中文手语词典开放给普通用户,解决了“记得动作却不知含义”的逆向检索难题。系统核心包括五个模块:基于大语言模型(LLM)的词典条目扩充、动作抽取、词典式重写、七通道检索以及候选重排。词典共收录 6,699 条手语条目,支持对动作描述的多视角匹配。

在 500 条由词典生成的动作‑描述查询上进行评估,Hit@1 达到 94.0%,Hit@9 为 97.4%,平均倒数排名(MRR)为 0.9540。重排模块将 Hit@1 从 71.8% 提升至 94.0%,实验表明丰富的条目描述对检索性能贡献显著。

系统在六个并发查询下的中位响应时间为 13.37 秒,已在真实用户中部署并获得积极的非正式反馈。通过把日常动作描述映射到已有手语及其含义,SignTrace 为识别陌生手语提供了实用工具。

点评

原文链接: https://arxiv.org/abs/2609.30295

[h] 返回首页