关闭广告

清华×生数研发国产视频具身基座模型Vidar,实现少样本泛化突破

网易科技报道2025-07-26 00:00:011900人阅读

7月25日,清华大学与生数科技联合发布模型。据介绍,作为视频大模型Vidu在智能领域延伸的重大突破,Vidar是全球首个基于通用视频大模型实现视频理解能力向物理决策系统性迁移的多视角具身模型。该模型创新性地构建了支持双臂协同任务的多视角视频预测框架,在保持SOTA性能的同时,展现出显著的少学习优势。

Vidar可在仅20分钟少样本训练下,泛化至全新机器人本体,完成多视角双臂操作任务,所需数据量约为行业领先的RDT的八十分之一,π0.5的一千两百分之一。相比以往依赖百万级动作数据的机器人控制模型,Vidar显著降低了数据门槛与训练成本。


该模型基于生数科技此前推出的视频大模型Vidu,在此基础上融入75万条双臂机器人具身数据,构建统一观测空间后进行预训练,并结合自动化动作采集与逆动力学解码器,实现从视频预测到动作控制的全链路闭环。

清华与生数科技团队还提出“任务无关动作数据”训练范式,通过ATARA方法自动采集机器人动作轨迹,仅需10小时,即可完成机器人动作空间泛化。配合高精度动作执行模型AnyPos,Vidar在实际任务中实现近100%成功率,精度远超当前行业基线33%~44%。


Vidar在VBench视频生成测试中,在主体一致性、背景还原与画面质量等维度均显著领先。结合测试时扩展机制(Test-Time Scaling),模型可根据具体任务智能调节生成预测,进一步提高真实场景下的执行稳定性。

研究团队表示,Vidar打破了现有VLA架构对特定机器人任务数据的依赖,首次构建了“通用视频-中等具身视频-少量本体数据”的三级训练框架,推动了具身智能向“虚实互通”的下一阶段演进。未来,Vidar可广泛应用于居家、医院、工厂等场景。

生数科技创始人兼首席科学家朱军教授表示:"我们致力于通过多模态大模型技术推动数字世界与物理世界的深度融合与协同进化。一方面,我们正在打造新一代数字内容创作引擎,让AI成为人类创意的延伸;另一方面,我们通过训练具身视频基座模型,实现虚拟与现实的深度交互。"(袁宁)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

央视探访:蔡国强52秒燃放1050盆烟花 距最近水体30米

央视新闻 浏览 107 09-23

日本首相罕见对美措辞强硬 美国务卿回应

上游新闻 浏览 5903 07-13

孙宇晨又上头条!要坐贝佐斯旗下蓝色起源火箭上太空

华尔街见闻官方 浏览 389 07-22

Lazada和天猫把系统打通了

华尔街见闻官方 浏览 73 09-26

棉密码「塌房」:卫生巾为何总难守住安全底线?

节点财经 浏览 6166 07-29

试驾比亚迪夏,奔着家用MPV刚需而来

懂车之道 浏览 5845 06-23

官方披露:正厅级崔建平被查当月还在捞钱

扬子晚报 浏览 42 11-09

汪小菲一家已回台北,小杨阿姨还在北京直播

春序娱乐 浏览 4799 08-20

从猛士速度到登峰行动:猛士进击智能越野新时代

天天汽车 浏览 17 12-27

商竣程复出无缘首胜疑似又受伤,17万能抚平排名跌出TOP100之痛?

网球之家 浏览 2634 07-29

阿森纳vs毕包:哲凯赖什、萨卡、苏比门迪首发,马杜埃凯替补

懂球帝 浏览 7388 08-10

午评:沪指半日跌0.68% AI硬件、创新药概念股再度大涨

网易财经 浏览 2075 07-31

吉尔贝托:枪手要给道曼提供支持,不要给他施加太多的压力

懂球帝 浏览 56 10-13

会见普京后 特朗普被指口风变了:考虑参照北约协防乌

观察者网 浏览 6771 08-18

张靓颖发文怒怼!“我做错了什么给人这种错觉?”

都市快报橙柿互动 浏览 3849 07-09

曹西平遗体火化,干儿子哽咽道别:谢谢四哥给我的一切

素素娱乐 浏览 3 01-28

拒绝小扎6年15亿美元天价offer!网友:他是有多讨厌扎克伯格??

量子位 浏览 4608 08-03

或命名星光560 五菱宏光侠量产版实车曝光

车质网 浏览 41 12-02

观众对白百何的评价,明白了当年宋丹丹那番话

娱乐圈笔娱君 浏览 37 11-12

丞磊帮粉丝道歉:内娱教科书级的暖心操作

喜欢历史的阿繁 浏览 3582 08-18

21.9万元的前铲+桶椅+轮毂!仰望U9碳纤维选装套件开售

新车评网 浏览 2572 06-09
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除沪ICP备20017958号-3