关闭广告

清华×生数研发国产视频具身基座模型Vidar,实现少样本泛化突破

网易科技报道2025-07-26 00:00:011823人阅读

7月25日,清华大学与生数科技联合发布模型。据介绍,作为视频大模型Vidu在智能领域延伸的重大突破,Vidar是全球首个基于通用视频大模型实现视频理解能力向物理决策系统性迁移的多视角具身模型。该模型创新性地构建了支持双臂协同任务的多视角视频预测框架,在保持SOTA性能的同时,展现出显著的少学习优势。

Vidar可在仅20分钟少样本训练下,泛化至全新机器人本体,完成多视角双臂操作任务,所需数据量约为行业领先的RDT的八十分之一,π0.5的一千两百分之一。相比以往依赖百万级动作数据的机器人控制模型,Vidar显著降低了数据门槛与训练成本。


该模型基于生数科技此前推出的视频大模型Vidu,在此基础上融入75万条双臂机器人具身数据,构建统一观测空间后进行预训练,并结合自动化动作采集与逆动力学解码器,实现从视频预测到动作控制的全链路闭环。

清华与生数科技团队还提出“任务无关动作数据”训练范式,通过ATARA方法自动采集机器人动作轨迹,仅需10小时,即可完成机器人动作空间泛化。配合高精度动作执行模型AnyPos,Vidar在实际任务中实现近100%成功率,精度远超当前行业基线33%~44%。


Vidar在VBench视频生成测试中,在主体一致性、背景还原与画面质量等维度均显著领先。结合测试时扩展机制(Test-Time Scaling),模型可根据具体任务智能调节生成预测,进一步提高真实场景下的执行稳定性。

研究团队表示,Vidar打破了现有VLA架构对特定机器人任务数据的依赖,首次构建了“通用视频-中等具身视频-少量本体数据”的三级训练框架,推动了具身智能向“虚实互通”的下一阶段演进。未来,Vidar可广泛应用于居家、医院、工厂等场景。

生数科技创始人兼首席科学家朱军教授表示:"我们致力于通过多模态大模型技术推动数字世界与物理世界的深度融合与协同进化。一方面,我们正在打造新一代数字内容创作引擎,让AI成为人类创意的延伸;另一方面,我们通过训练具身视频基座模型,实现虚拟与现实的深度交互。"(袁宁)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

联发科新一代神U预定:曝天玑8500年底登场

快科技 浏览 1148 07-20

贵州茅台:控股股东拟增持30亿-33亿元公司股票

网易财经 浏览 14 08-30

名记:伊萨克预计不会出席周二晚的PFA颁奖典礼

懂球帝 浏览 664 08-19

男仰后继人才断层!世锦赛200仰预赛:17岁中国小将仅排第34位

全景体育V 浏览 9698 07-31

和尚对女性下手被当场撞见 吐槽徒弟"连泡妞都不会"

界面新闻 浏览 4332 07-16

订单狂飙500%,工业富联,脱胎换骨!

飞鲸投研 浏览 14 08-22

水果贵族进10元档 街头低至1元/斤高端超市卖99元/盒

时代财经 浏览 15 08-25

长沙一盲道被护栏分割成"迷宫" 街道:为人车分流安装

潇湘晨报 浏览 3093 08-09

湖记:我很难信湖人会冒险引进塞布尔/罗威 约基奇字母哥我选前者

直播吧 浏览 4611 08-14

TVB女星刘佩玥被男粉摸臀!全场吓懵

橙星文娱 浏览 6110 07-26

消失了一年半的实用功能!微软在Windows 11上复活:定位鼠标更方便

快科技 浏览 1895 08-05

欧盟想"认怂" 法外长:今天向美屈服明天中国就来要价

澎湃新闻 浏览 4630 07-19

普京:俄罗斯仍位列五大武器出口国之列

澎湃新闻 浏览 7914 05-24

23.59万起预售!上汽奥迪首款纯电发布,全域NOA+800V架构上车

车东西 浏览 4855 08-19

继承50亿资产的梧桐妹,真给贾静雯长脸了

春序娱乐 浏览 6259 07-27

深圳最牛“盲盒”,开出了下一个30年

老斯基财经 浏览 17 08-27

42家A股上市银行半年报:营收均实现同比正增长,六大行将分红超2000亿

红星资本局 浏览 10 09-01

基辅防空警报持续超5小时 一文读懂俄乌最新战况

央视新闻客户端 浏览 3103 06-08

以政府证实:已批准占领加沙城计划

央视新闻客户端 浏览 2129 08-09

150亿美元!特朗普关税冲击企业盈利,机构预警美股短期压力

第一财经资讯 浏览 3172 08-07

赵丽颖被爆新恋情两个月,冯绍峰一记漂亮回击

负面黑洞 浏览 427 08-06
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除沪ICP备20017958号-3