蚂蚁研究院开源4DAnyone一段随手拍视频变身4D人物重建神器完整项目概览【免费下载链接】4DAnyone项目地址: https://ai.gitcode.com/hf_mirrors/AntResearch/4DAnyone4DAnyone是蚂蚁研究院AntResearch开源的一个 4D 人物重建模型你只需要一段随手拍的单目视频它就能生成该人物在多个视角下的视频进而完成下游的4DGS4D 高斯泼溅重建与新视角合成。简单来说——手机拍一段视频就能重建出一个可以 360° 环视的动态 3D 人物。 它解决什么问题传统 4D 人物建模通常需要昂贵的环拍相机阵列或深度传感器繁琐的扫描、标定与后处理流程漫长的渲染与合成时间而 4DAnyone 的思路是用一段普通单目视频作为唯一输入由模型脑补出其他角度的画面多视角视频生成再交给 4D 重建管线生成动态 4D 高斯场景。对新手和普通用户来说这意味着门槛大幅降低——不需要任何专业设备会拍视频就会用。 项目仓库里都有什么打开仓库你会看到模型权重与示例素材已经全部内置开箱即用目录 / 文件内容说明4danyone/model.safetensors4DAnyone 主模型多视角视频生成检查点4danyone/smplx_to_goliath70.ptSMPL-X 到 MHR70Goliath关键点回归器4danyone/Wan2.2_VAE.pthWan2.2 视频 VAE 编解码器4danyone/models_t5_umt5-xxl-enc-bf16.pthUMT5-XXL 文本编码器Wan2.1 系列组件4danyone/umt5-xxl/对应的分词器配置tokenizer 等gvhmr/GVHMR 人体重建检查点、ViTPose 姿态、YOLOv8x 检测等perceptual/imagenet-vgg-verydeep-19-conv.safetensorsVGG-19 感知损失权重data/source/pexels/8 段 121 帧的 Pexels 示例视频25/30 FPS 全覆盖示例视频清单及来源见 data/source/pexels/README.md每段都是 121 帧、1080p~2160p 的精选片段可以直接拿来跑通完整流程非常适合新手上手。 技术栈速览一个模型背后的全明星组合4DAnyone 并非从零造轮子而是把多个明星开源组件拼装成一条完整管线人体检测与姿态YOLOv8x人体检测 ViTPose关键点——位于 gvhmr/人体参数估计GVHMR HMR2.0a来自 4DHumans视频生成骨干Wan2.2 VAE UMT5-XXL 文本编码器感知质量约束VGG-19 卷积层感知损失对新手而言不必深究每个组件的原理只需记住这条主线检测人 → 估计人体模型 → 生成多视角视频 → 4DGS 重建。⚖️ 许可证混合授权使用前请看清这是一个混合许可证仓库——没有单一协议覆盖所有文件。核心模型权重4danyone/model.safetensors采用宽松的Apache-2.0但第三方组件各有归属GVHMR 为研究/非营利授权、YOLOv8x 为 AGPL-3.0、VGG-19 为 CC BY 4.0 等。完整的资产-许可证对照表见 LICENSE各协议原文都收录在 licenses/ 目录中。商用前请务必逐项确认。 快速上手路径获取仓库git clone https://gitcode.com/hf_mirrors/AntResearch/4DAnyone准备输入视频可以直接使用 data/source/pexels/ 里的示例片段121 帧25/30 FPS 均可运行推理模型与全部依赖组件已在仓库中就位按官方流程inference.py传入视频路径即可得到结果多视角视频 → 4DGS 场景支持任意新视角观看与重渲染✅ 小结一段单目视频即可驱动完整的 4D 人物重建流程零专业设备仓库内置主模型、人体重建组件、感知损失权重与示例视频开箱即用核心资产为 Apache-2.0 授权混合许可证下商用前请查阅 LICENSE技术路线Wan2.2 GVHMR 4DGS成熟可追溯便于二次研究与魔改对于想做虚拟人、数字分身、影视特效或 4D 内容创作的新手来说4DAnyone 是目前最值得收藏的随手拍 → 4D 人物开源方案之一。【免费下载链接】4DAnyone项目地址: https://ai.gitcode.com/hf_mirrors/AntResearch/4DAnyone创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考