关闭广告

清华×生数研发国产视频具身基座模型Vidar,实现少样本泛化突破

网易科技报道2025-07-26 00:00:011899人阅读

7月25日,清华大学与生数科技联合发布模型。据介绍,作为视频大模型Vidu在智能领域延伸的重大突破,Vidar是全球首个基于通用视频大模型实现视频理解能力向物理决策系统性迁移的多视角具身模型。该模型创新性地构建了支持双臂协同任务的多视角视频预测框架,在保持SOTA性能的同时,展现出显著的少学习优势。

Vidar可在仅20分钟少样本训练下,泛化至全新机器人本体,完成多视角双臂操作任务,所需数据量约为行业领先的RDT的八十分之一,π0.5的一千两百分之一。相比以往依赖百万级动作数据的机器人控制模型,Vidar显著降低了数据门槛与训练成本。


该模型基于生数科技此前推出的视频大模型Vidu,在此基础上融入75万条双臂机器人具身数据,构建统一观测空间后进行预训练,并结合自动化动作采集与逆动力学解码器,实现从视频预测到动作控制的全链路闭环。

清华与生数科技团队还提出“任务无关动作数据”训练范式,通过ATARA方法自动采集机器人动作轨迹,仅需10小时,即可完成机器人动作空间泛化。配合高精度动作执行模型AnyPos,Vidar在实际任务中实现近100%成功率,精度远超当前行业基线33%~44%。


Vidar在VBench视频生成测试中,在主体一致性、背景还原与画面质量等维度均显著领先。结合测试时扩展机制(Test-Time Scaling),模型可根据具体任务智能调节生成预测,进一步提高真实场景下的执行稳定性。

研究团队表示,Vidar打破了现有VLA架构对特定机器人任务数据的依赖,首次构建了“通用视频-中等具身视频-少量本体数据”的三级训练框架,推动了具身智能向“虚实互通”的下一阶段演进。未来,Vidar可广泛应用于居家、医院、工厂等场景。

生数科技创始人兼首席科学家朱军教授表示:"我们致力于通过多模态大模型技术推动数字世界与物理世界的深度融合与协同进化。一方面,我们正在打造新一代数字内容创作引擎,让AI成为人类创意的延伸;另一方面,我们通过训练具身视频基座模型,实现虚拟与现实的深度交互。"(袁宁)

本文来自网易科技报道,更多资讯和深度内容,关注我们。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

牛弹琴:两家中资背景企业在巴西内斗 让全世界看笑话

大象新闻 浏览 148 08-22

买下11栋房子,私下收学生隐蔽办学?扎克伯格遭邻居质疑,引来政府调查

红星新闻 浏览 2602 08-14

客服范式将被AI智能体颠覆 天润云(02167)的未来值得期待吗?

智通财经 浏览 9182 08-07

"715万建牛郎织女雕塑"调查2年无结论 河南平顶山回应

AHTV第一时间 浏览 4896 07-13

伊朗:三处遭袭核设施未发现污染迹象

界面新闻 浏览 2440 06-23

摆烂太难?篮网45分狂胜雄鹿 战绩仍优于快艇国王

体坛周报 浏览 25 12-15

迷雾剧场新剧:超越悬疑,窥见人心

吐槽电影院 浏览 65 10-17

零跑汽车10月销量破7万台

三言科技 浏览 42 11-01

A股并购重组活跃 产业整合趋势增强

商业观察杂志社 浏览 97 08-27

罕见,4000亿巨无霸,叫板英伟达!

飞鲸投研 浏览 1175 07-25

“同程系”横空出世!吴志祥9.56亿鲸吞大连圣亚

野马财经 浏览 6672 08-05

穆西亚拉评心目中年度蓝阵容:巴黎五人入选,队长选择凯恩

懂球帝 浏览 15 01-13

光学堆栈厚度不到 3 毫米,Meta 研发头显用全新波导全息显示技术

IT之家 浏览 5739 08-03

多家银行信用卡业务“瘦身” 行业进入精耕细作新阶段

商业观察杂志社 浏览 3378 08-06

成本仅800万,《赴汤蹈火》首映夺冠,安志杰又把动作片拍成爆款

靠谱电影君 浏览 8532 07-12

以军称袭击黎巴嫩真主党多个军事目标

极目新闻 浏览 40 10-24

荷兰将向乌克兰交付最后一架F-16战斗机 兑现24架承诺

国际在线 浏览 5305 05-26

陈奕迅父亲被扒!因贪污坐牢6年,出狱后高调亮相儿子演唱会

萌神木木 浏览 77 08-30

又辣又嗲,很难不为越南设计买单

时尚COSMO 浏览 3491 08-07

175款智慧康养机器人产品将亮相成都!记者提前探馆带你体验

红星新闻 浏览 53 10-29

人未落地声先至 特朗普想不到泽连斯基强硬起来了

博览历史 浏览 8956 08-19
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除沪ICP备20017958号-3