摘要
近年来，3D人类重建技术取得了显著进展，但当前模型在最具挑战性的真实场景中仍表现不佳。它们常常产生不稳定的几何形状、不准确的肢体关节和在深度模糊或自遮挡下的预测不可靠。导致这种情况的一个关键原因是，现有数据集缺乏高分辨率图像、高精度标注和多样化全身运动的结合，无法支持稳健的重建。
为了解决这一问题，我们提出了Human4K，一个大规模的4K多视角全身人类重建数据集，配备了动作捕捉精确的SMPL-X标注。Human4K包含超过600万张由八视角高分辨率相机系统捕获的4K图像，这些相机与专业的Vicon动作捕捉系统同步，涵盖11名受试者执行复杂、高度关节化和强自遮挡的全身运动。
所有序列经过运动重定向与精细化模块（MRRM）处理，以确保全身及肢体的精确对齐。实验结果表明，使用Human4K进行训练在标准基准测试上持续改善全身重建，特别是在手、脚以及深度模糊肢体配置上的提升尤为显著。
博主点评： 该数据集为3D人类重建领域提供了新的可能性，通过高分辨率图像和精确标注的结合，显著提升了模型在复杂场景下的表现，未来或将推动相关技术的进一步发展与应用。