NeFut Logo NeFut
EN 管理员登录

[AI学术] DramaChain Bench:短剧生成全链路基准

发布于:2026-09-03 22:00 最后更新:2026-09-04 02:14
#AI #Machine Learning #optimization

商业短剧制作遵循脚本、分镜、关键帧、镜头视频、成片五个阶段。现有基准仅在视频生成环节使用预先编写的输入,无法回答两个关键问题:每个阶段是否遵循原始脚本意图,以及不同镜头在拼接后是否保持连贯。DramaChain Bench 首次提供覆盖完整链路的评估,基于三套内部系统共享的 DramaChain Dimensions。该维度体系在每个阶段设定五个评估轴,细化为 63 个叶子维度。

DramaChain Agent 在工作流和成片质量上与商业短剧平台对齐,实现模型间的阶段公平比较。DramaChain 标注系统对 5,785 条样本分别由三位专业标注员打分,缺陷在时空上定位并来源于预定义缺陷列表,累计得到 17,488 条有效分数和 255,925 条可追溯归因记录。标注结果显示,上游缺陷会在流水线中传播,最终质量并非仅由视频生成决定。

DramaChain Agentic Judge 自动对每个叶子维度打分,经过多轮智能推理后依据每项检查清单给出最终判断,其与人工排名的平均皮尔逊相关系数达到 0.918,足以在无需人工标注的情况下接纳新模型。

点评

原文链接: https://arxiv.org/abs/2609.00646

[h] 返回首页