UniMate:一句话让任意 3D 骨骼动起来,文本驱动骨骼动画完全指南

发布时间:2026/10/22 7:07:48

UniMate:一句话让任意 3D 骨骼动起来,文本驱动骨骼动画完全指南 UniMate一句话让任意 3D 骨骼动起来文本驱动骨骼动画完全指南【免费下载链接】UniMate[SIGGRAPH Asia 2026] UniMate: One Unified Model to Animate Diverse Skeletons项目地址: https://gitcode.com/GitHub_Trending/un/UniMateUniMate 是 SIGGRAPH Asia 2026 接收的统一 3D 骨骼动画生成模型。它的用法很直接一个绑好骨骼的 3D 资产人形、四足机器人、鸟类甚至一朵花加上一句文字就能实时产出一段完整的自然动作不用为每个骨架单独训练也不做测试时优化。 先看效果它能驱动什么样的骨架下图里的所有动作都出自同一个模型人形角色、四足机器人、动物、花朵……骨架结构各不相同提示词换一句动作就换一套。它是什么为什么一个模型能驱动所有骨架思路是放弃一类骨架配一个模型。UniMate 只训练一个去噪网络让它同时理解双腿、四足、鸟类、海洋生物、昆虫、铰接刚体等拓扑的运动数据推理时按流匹配flow matching扩散模型靠逐步去噪生成图这里同理的方式逐帧去噪文本提示作为引导条件直接输出一段 60 帧的动作序列。能做什么文本生成、编辑、补间与扩展四大能力下面四项能力全部来自同一个模型无需任何额外训练。其中编辑、补间、扩展都靠同一套替换式采样见 unimate/inference/已知帧在每一步去噪时被严格固定网络只负责补出剩下的部分。文本生成动作一句提示词骨架就动起来资产加一句 An object flaps its wings. 之类的提示词动作实时生成自己的 GLB / FBX 资产可以先跑一遍 data_process/rig_preprocess/ 再使用。下图中这只 51 个关节的鹰就是仓库自带的示例资产。文本引导动作编辑只改你想改的那部分关节用--keep_joints把颈部、头部这类关节钉在原轨迹上剩余关节按新提示词重新生成。下面这条示例里机器人的转头被改成了向前走被锁定的关节逐帧保持原样。动作补间关键帧之间的过渡自动补全只给首尾两帧关键帧--keep_frames 0,-1中间的过渡全部由模型生成——这正是动画师口中的中间帧工作现在自动化了。动作扩展多条提示词拼成一条长动画测试用例里把值写成列表例如站起来、向前走、原地转身。模型逐段生成每段开头与上一段尾部对齐--expand_overlap控制重叠帧数最后拼成连贯的长序列。快速上手三步从克隆到生成第一个动作装环境很干净一个 conda 环境通吃数据处理、训练和推理git clone https://gitcode.com/GitHub_Trending/un/UniMate conda create -n unimate python3.10 -y conda activate unimate pip install setuptools81 pip install -r requirements.txt --no-build-isolation第二步把官方 checkpointunimate_uniml3d_f60_v3下到outputs/hf download命令见 README 的 Inference 小节。若想驱动数据集里的骨架需再下载 UniML3D 到dataset/约 88 GB只用自己资产则可跳过。然后跑python -m unimate.inference.sample --exp_dir outputs/unimate_uniml3d_f60_v3 \ --test_cases_json assets/examples/examples.json --num_repetitions 3 --output_dir outputs/samples/examples产出的.npy动作可用scripts/run_animate_motion.sh驱动回原网格导出带动画的 GLB / FBX。想自己训练的话再执行accelerate launch -m unimate.training.train --config configs/uniml3d_60frames_graph_adaln.jsonscripts/下的封装脚本会自动挑显存最空闲的 GPU新手直接跑 shell 脚本即可。幕后13,769 条动作从哪来模型的底气来自 UniML3D 数据集13,769 条带文本配对的运动片段覆盖 7,430 个骨架原料取自 Mixamo人形、Truebones ZOO动物和 Objaverse-XL杂类资产全部统一到同一规范姿态下。训练用流匹配做目标每个片段 60 帧configs/ 里 8 份 JSON 对应 4 种数据组合 × 2 种注意力变体改字段即可切换实验数据流水线的细节见 data_process/README.md。代码导读模型各部分放在哪目录干什么unimate/models/去噪骨干图注意力 / 全注意力两种变体与扩散、流匹配基础设施unimate/dataset/数据加载、在线增强与条件构造unimate/training/训练循环、EMA 权重与日志入口是train.pyunimate/inference/采样入口sample.py编辑 / 补间 / 扩展都实现在这里data_process/完整数据管线Blender 导出渲染、VLM 打字幕、关节标注configs/8 份训练配置 JSON适合谁用局限又是什么内容制作给绑好骨骼的角色或资产批量产出动画素材省去逐帧 K 帧游戏与机器人团队四足机器人、动物、机械臂等非人形骨架直接可用算法研究者统一骨架动画 流匹配训练的完整参考实现作者也坦率说明这仍是任意骨架文本生成动作的早期探索部分骨架与动作会失败。如果你遇到不work 的 case欢迎提 issue——这些失败案例正是推动模型走向下一步的养料。代码采用 MIT 许可checkpoint 为 CC BY-NC 4.0三个数据集各自遵循源许可。【免费下载链接】UniMate[SIGGRAPH Asia 2026] UniMate: One Unified Model to Animate Diverse Skeletons项目地址: https://gitcode.com/GitHub_Trending/un/UniMate创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
延伸阅读

更多相关文章

2026/10/22 9:18:32

CUDA加速随机森林:源码解析与GPU性能优化实践

简介:在GPU上实现随机森林加速的完整项目源码,面向希望掌握CUDA编程并优化机器学习计算性能的开发者与研究人员。项目针对随机森林处理大规模数据时训练耗时的痛点,将决策树构建、预测等环节映射到CUDA核函数并行执行,覆盖GPU内存…

2026/10/22 9:18:32

无人机电力巡检线树检测数据集详解:VOC/YOLO格式与YOLOv8训练实践

1. 无人机电力巡检为什么要做“线树检测”:应用场景与数据价值1.1 “线树矛盾”是巡检现场最头痛的老大难做无人机电力巡检的朋友应该都有同感:航拍这关其实不难,难的是拍回来的图怎么看、怎么用。线路走廊大部分穿过山区和林区,植…

2026/10/22 9:18:32

Agent Infra 揭秘:智能体落地的关键基础设施

最近大半年,我跟不少做后端、做平台的同事聊技术选型,发现一个非常有意思的现象:大家聊的最多的已经不是某个大模型又涨了多少参数、跑分又高了多少,而是“这个智能体到底怎么接进生产环境”“工具调用怎么鉴权”“上下文怎么不被…

2026/10/22 9:18:32

云端托管与开源自主:智能体选型的技术底座与实操对比

1. 从两个真实使用场景说起:为什么"云端易用"和"开源自主"会打起来去年年底,我同时用两套方案处理同一批任务:一边是托管在云端的通用型智能体服务,另一边是在本地机器上跑的开源智能体框架。任务本身不复杂—…

2026/10/22 9:18:32

Manim语音驱动动画:基于音频锚点的语义化时间轴重构

1. 为什么“声音不动、动画去贴”成了2026年Manim配音的默认范式?去年底给某高校数字媒体实验室做Manim工作坊时,一位做物理可视化教学的导师直接把笔记本推到我面前:“你听这段录音——3分12秒处那个‘加速度方向突变’的讲解,语…

2026/10/22 9:13:30

森林病虫害防治系统:从部署到避坑的完整指南

简介:这套森林病虫害防治系统采用Java与JSP构建,面向Web开发初学者和农业信息化开发者,演示了如何将图像识别技术应用于植物病虫害检测场景。系统涵盖图片上传、特征提取、模型调用与结果展示等环节,可通过浏览器完成实时识别与结…

2026/10/21 4:53:08

金融AI落地指南:从调研报告到技术选型与工程实践

简介:这份PDF报告聚焦2025年金融服务业中国AI现状与趋势,面向金融科技从业者、AI战略规划人员及关注行业数字化转型的研究者,帮助读者把握生成式AI在银行、支付、交易等场景中的落地路径与投资方向。资源包内含1个PDF文件,大小约1…

2026/10/22 0:01:49

电商智能运营体系从0到1:架构设计、落地步骤与避坑指南

前两年我们团队接了一个电商平台的运营中台项目,目标很直白:把过去靠运营拍脑袋做的选品、定价、发券、推活动这些事,逐步用数据算法和自动化流程代替。项目名字内部就叫“电商智能运营体系”。最近有不少朋友问我当时是怎么设计的、踩过哪些…

2026/10/22 0:01:49

若依框架AI代码生成不稳定?用Agent Skill三层结构+五步法搞定

最近一段时间,我一直想把后台管理系统里那些机械重复的增删改查代码交给AI去写。框架用的是若依,按理说这类业务代码模式非常固定,应该是AI最擅长的事情。可真试下来却不是那么回事——你让AI生成一个用户管理模块,它给出的Contro…

还想了解更多?直接咨询顾问

免费诊断 + 免费方案 + 透明报价。

全国咨询热线400-8866-253
免费获取方案
☎咨询二维码 ☎ ↑