关闭广告

清华×生数研发国产视频具身基座模型Vidar,实现少样本泛化突破

网易科技报道2025-07-26 00:00:011965人阅读

7月25日,清华大学与生数科技联合发布模型。据介绍,作为视频大模型Vidu在智能领域延伸的重大突破,Vidar是全球首个基于通用视频大模型实现视频理解能力向物理决策系统性迁移的多视角具身模型。该模型创新性地构建了支持双臂协同任务的多视角视频预测框架,在保持SOTA性能的同时,展现出显著的少学习优势。

Vidar可在仅20分钟少样本训练下,泛化至全新机器人本体,完成多视角双臂操作任务,所需数据量约为行业领先的RDT的八十分之一,π0.5的一千两百分之一。相比以往依赖百万级动作数据的机器人控制模型,Vidar显著降低了数据门槛与训练成本。


该模型基于生数科技此前推出的视频大模型Vidu,在此基础上融入75万条双臂机器人具身数据,构建统一观测空间后进行预训练,并结合自动化动作采集与逆动力学解码器,实现从视频预测到动作控制的全链路闭环。

清华与生数科技团队还提出“任务无关动作数据”训练范式,通过ATARA方法自动采集机器人动作轨迹,仅需10小时,即可完成机器人动作空间泛化。配合高精度动作执行模型AnyPos,Vidar在实际任务中实现近100%成功率,精度远超当前行业基线33%~44%。


Vidar在VBench视频生成测试中,在主体一致性、背景还原与画面质量等维度均显著领先。结合测试时扩展机制(Test-Time Scaling),模型可根据具体任务智能调节生成预测,进一步提高真实场景下的执行稳定性。

研究团队表示,Vidar打破了现有VLA架构对特定机器人任务数据的依赖,首次构建了“通用视频-中等具身视频-少量本体数据”的三级训练框架,推动了具身智能向“虚实互通”的下一阶段演进。未来,Vidar可广泛应用于居家、医院、工厂等场景。

生数科技创始人兼首席科学家朱军教授表示:"我们致力于通过多模态大模型技术推动数字世界与物理世界的深度融合与协同进化。一方面,我们正在打造新一代数字内容创作引擎,让AI成为人类创意的延伸;另一方面,我们通过训练具身视频基座模型,实现虚拟与现实的深度交互。"(袁宁)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

都体:尼古拉斯-冈萨雷斯和西蒙尼直接接触;罗马也对他感兴趣

懂球帝 浏览 91 08-22

阿斯:卡雷拉斯抢断数据领跑全队,其防守能力已全面超越门迪

懂球帝 浏览 86 09-26

日防卫省称对俄中间频繁军事互动深表关切 外交部回应

外交部网站 浏览 5965 07-16

时尚中国·荣耀东方 —— 2025中国时尚产业盛典即将开幕

时尚COSMO 浏览 412 05-31

美国公布新型核弹B61-13 威力是广岛原子弹的21倍

澎湃新闻 浏览 10098 05-21

三星One UI 8.5前瞻:基于安卓16,引入情景感知AI

IT之家 浏览 113 11-27

王晶评娃哈哈争产,两句话内涵宗馥莉不大度,一张平安纸暗示结局

不八卦会死星人 浏览 1924 08-12

蔡磊抗"冻"6年:科研投入超1亿 如今只能用眼控仪交流

红星新闻 浏览 79 12-11

韩星在内娱吃相越来越难看?

萌神木木 浏览 90 11-12

三战全胜,巴列卡诺主帅伊尼戈-佩雷斯当选西甲10月最佳教练

懂球帝 浏览 55 10-29

电讯报:如果格伊今夏离开水晶宫,利物浦将在竞争战中领先

直播吧 浏览 6282 08-10

外观更战斗 欧陆GT Speed新车型谍照曝光

车质网 浏览 9768 06-12

印度油企疑要屈服了 正暂时减少购买俄油等待政府指令

澎湃新闻 浏览 2770 08-08

欧尔班:乌克兰和欧盟认为匈牙利很碍事 企图更迭政府

文汇报 浏览 104 10-13

史上最贵法国门将!舍瓦利耶:加盟巴黎无比自豪,这对我意义非凡

直播吧 浏览 5365 08-10

统计局:6月份规模以上工业企业利润同比降幅较5月份有所收窄

国家统计局网站 浏览 1042 07-27

戴森全新 V8 Cyclone 旗舰版吸尘器上市:五重升级,2999 元

IT之家 浏览 103 08-22

新能源乘用车零售占比近六成,燃油车8月上旬车市同比下滑4%

经济观察报 浏览 2488 08-14

如何?美记建议托马斯两年3000万&第二年球队选项和篮网续约

直播吧 浏览 8450 08-11

古二3次发布录音,王家卫秦雯深陷争议

阿伧说事 浏览 93 11-10

德媒:训练中被约纳坦-塔踩到脚的斯塔尼希奇并未受重伤

懂球帝 浏览 65 02-04
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除沪ICP备20017958号-3