跳到正文
arXiv · cs.RO· Wendong Bu, Tinghong Ye, Qizhou Wang, Jiacheng Li, Zhiqi Ge, Yuze Lin, Zhongqi Yue, Yi Su, Jingyu Wang, Kai Shen, Jingdong Liu, Chengyuan Deng, Xiaoxuan Chen, Xin Tan, Jiaming Ji, Wenqiao Zhang, Chenghong Jiang, Tuoyu Li, Siliang Tang, Jun Xiao, Tat-Seng Chua, Yueting Zhuang, Xingxing Wang, Juncheng Li·· 3 小时前精选AI 评分78

论文 / 摘要阅读

Movens-Zero:用大规模人类视频扩展人形运动基础模型

Movens-Zero: Scaling Humanoid Motion Foundation Models with Large-Scale Human Videos

AI 导读 · 根据来源整理

作者提出 Movens-Zero,一种可扩展的理解-生成-执行架构,用于人形运动基础模型,并构建了 Movens-5M 数据集。该数据集由互联网原始视频经片段生成、质量过滤、语义标注、运动恢复和物理精炼(含人形重定向与执行验证)得到,包含 1500 万条人类运动序列和 500 万条物理可执行的人形运动序列,总时长超过 1 万小时,并与文本、RGB 视频、语音和音乐对齐。方法上采用任务混合流匹配训练,在七类生成任务上联合优化单一动作专家,支持从文本、语音、音乐和视频直接生成运动;多模态实时分块在持续更新的指令与机器人状态下衔接重叠分块,实现连续闭环执行。

本站目前提供摘要

以上是对来源材料的中文整理,不是完整论文或全文。研究方法、数据与完整论述请到来源页面核对。

前往 arXiv · cs.RO 阅读原文 ↗

来源:arXiv · cs.RO · arxiv.org