“世界模型”发布,机器人迎来scaling law?
人形机器人要走向真实生活,世界模型如何更好地训练它们面对各种突发、发布意外、机器长尾场景?人迎
眼下,大家真不用在真实场景的世界模型数据里穷尽各种可能了。
9月17日,发布挪威机器人公司1X发布一款针对机器人的机器“世界模型”,结合了Sora视频生成和端到端自动驾驶(E2EAD)世界模型(world models for autonomous vehicles)技术,人迎可生成高保真的世界模型视频,使得机器人能够模拟多种场景下的发布动作和交互,从而在模拟空间中进行规划、机器操作、人迎训练和评估,世界模型提高其在现实世界中执行任务的发布效率和准确性。
1X公司成立于2014年,机器主要研发双足机器人和商用轮式人形机器人,于2023年获得Open AI的投资,并与之共享数据和技术。
如何训练及评估机器人与真实世界的泛化交互能力,是机器人行业亟待解决的关键问题。
由于真实世界的环境存在不稳定性,通常很难重现。为控制环境因素的变量,传统的训练方法往往采用基于物理的模拟仿真器(如Bullet、Mujoco、Isaac Sim、Drake),使得实验和训练可重置及重现,从而能够比较评估不同的控制算法。
然而,这些模拟器大多是为刚体动力学而设计,所模拟的环境通常在视觉和实际用例多样性方面较为有限,导致难以将小规模评估结果直接推广至现实世界。
而在1X之前,产业界也有不少拓展机器人训练场景和任务多样性的尝试。
2024年7月15日,上海AI实验室推出首个专为各种机器人设计的模拟交互3D社会GRUtopia(桃源),包含了覆盖10万个精细注释的交互式场景数据集GRScenes、由大型语言模型驱动的NPC(非玩家角色)系统GRResidents,以及评估机器人能力的基准测试GRBench。
GRUtopia采用从仿真到真实(Sim2Real)的范式,旨在降低现实世界数据收集的难度和成本,解决具身智能领域的数据稀缺问题。该项目已全部开源。(开源地址:https://github.com/OpenRobotLab/GRUtopia)
此次1X公司发布的“世界模型”,在构建和评估机器人能力时,采用了一种全新的方法——直接从机器人原始传感器数据中学习。
1X公司收集了数千小时机器人在家庭和办公环境中交互的真实数据,训练该模型学会了模拟现实环境,并根据不同动作指令模拟产生不同结果,预测机器人与环境的交互,如规划路径、抓取物体、折叠衣物,甚至自动避免与人碰撞,能够在数百万个场景中评估机器人策略的表现。
尽管在物体一致性、物理规律和自我认知方面仍存在一些挑战,1X此次发布的“世界模型”为机器人学习和认知研究提供了全新的视角。其创始人兼CEO Bernt Bornich认为,
相关文章
驻港国家安全公署:坚决支持香港警方依法通缉8名外逃反中乱港首恶分子
驻港国家安全公署7月3日发表声明,表示坚决支持香港警方依法通缉任建峰、袁弓夷、郭凤仪、郭荣铿、许智峰、蒙兆达、刘祖迪、罗冠聪等8名外逃反中乱港首恶分子,并采取一切必要措施追究其法律责任,强调海外不是反2025-01-17- 德国纽伦堡2024年4月10日 /美通社/ -- 全球工业物联网品牌厂商研华科技今日在全球最大嵌入式电子与工业计算机应用展Embedded World 2024)宣布与高通技术公司Qualcomm T2025-01-17
- 北京2024年4月10日 /美通社/ -- 2024年4月10日上午,爱尔兰利莫瑞克大学University of Limerick, Ireland)和河南理工大学Henan Polytechnic2025-01-17
- 上海2024年4月12日 /美通社/ -- 丰田纺织TOYOTA BOSHOKU)总部:日本爱知县,CEO:白柳正义)将于2024年4月25日至5月4日出展在北京中国国际展览中心顺义馆)举行的第十八届2025-01-17
- 6月10日,“江西工职院‘6·1’食品安全事件”联合调查组发布情况通报,针对江西工业职业技术学院“6·1”食品安全事件,江西省已成立由省教育厅、省公安厅、省国资委、省市场监督管理局等部门组成的联合调查2025-01-17
- 宁波2024年4月10日 /美通社/ -- 精益与数智化有机结合,形成了"精益数智化",部分企业积极部署了精益数智化,收获了显著成果,如:生产成本降低约30%,制造周期缩短约45%2025-01-17
最新评论