OpenAI押注的「1X」训出专用世界模型,首证机器人ScalingLaw

机器人能认出镜子中的自己吗?目前来看,依然做不到。

去年3月,OpenAI领投了一家具身智能公司「1X」。这是一家成立于2014年的挪威人形机器人公司,致力于研发双足机器人NEO和商用轮式人形机器人EVE。

本月初,1X正式推出了专为家庭使用而设计的双足人形机器人NEOBeta,让人们看到了大模型加持下活灵活现、超拟人机器人的不断进步。

如今,1X迎来了自己的世界模型。具体地,基于视频生成(Sora)和自动驾驶世界模型(端到端自动驾驶,E2EAD)领域的进展,1X训练出了一个世界模型,作为自家机器人的虚拟模拟器。

1X人工智能副总裁EricJang表示,过去几个月,1X一直在开发通用机器人的学习模拟器,如今终于问世了。

1X工程师DanielHo表示这是机器人世界模型的初步进展,模型可以理解接触到的物理世界并生成高保真视频,使机器人可以在自己的神经空间中执行规划、评估和模拟操作。并且,很多生成的视频片段很难与真实视频区分开来。

1X创始人兼CEOBerntBornich表示,这是人形机器人数据显著增强扩展定律的首个证据,「没有勺子」。

各路网友也对这个机器人世界模型给予了很高评价。

世界模型加持下的1X人形机器人还让一些人直呼《西部世界》重现。

从1X官方给出的Demo可以看到,从相同的起始图像序列开始,1X的世界模型可以从不同的机器人(EVE)动作建议中想象出多种未来。

这个世界模型还能预测非平凡物体(如刚体)的相互作用、掉落物体的影响、部分可观测性、可变形物体(窗帘、衣物)和铰接物体(门、抽屉、窗帘、椅子)。

机器人的「ChatGPT时刻」,同样需要扩展定律

世界模型解决了构建通用机器人时一个非常实际、但经常被忽视的挑战,即评估。如果你训练的机器人可以执行1000项任务,与先前模型相比,我们也很难确定新模型用在机器人上,在这1000项任务上表现优越。由于周围环境如光照细微的变化,即使模型权重相同,机器人也可能在几天内经历性能的快速下降。

经过深入研究我们不禁会问,当数据、计算和模型规模增加时,机器人的能力将如何扩展?在大模型领域,扩展定律普遍得到大家的认同,如果机器人技术要迎来「ChatGPT时刻」,必须首先建立它的扩展定律。

其他评估方法

基于物理的模拟(Bullet、Mujoco、IsaacSim、Drake)是快速测试机器人策略的合理方法。这些方法可重置且可重现,这样一来,研究人员能够仔细比较不同控制算法带来的的差异。

然而,这些模拟器大多是为刚体动力学设计的,需要大量手工资产创作。

如何让机器人打开咖啡滤纸的纸盒、用刀切水果、拧开冷冻果酱罐或与人类等其他智能体互动还是一个值得思考的问题。众所周知,家庭环境中遇到的日常物体或者饲养的宠物很难模拟,因此机器人使用的模拟环境往往在视觉上很单调,缺乏现实世界用例的多样性。对现实或模拟环境中有限数量任务的小规模评估无法泛化到对现实世界中的大规模评估。

世界模型

1X正在采用一种全新的方法来评估通用机器人,即直接从原始传感器数据中学习模拟器,并使用模拟器来评估新策略。通过直接从真实数据中学习模拟器,你可以在不手动创建资产的情况下了解真实世界的复杂性。

在过去的一年里,1X收集的1X旗舰产品EVE机器人的数据高达数千小时,这些数据包括在家中和办公室中执行各种移动操作任务以及与人互动的任务。研究人员将这些视频和动作数据结合起来,训练了一个世界模型,该模型可以根据观察和动作预测未来的视频。

动作控制

该研究训练的世界模型能够根据不同的动作指令产生不同的结果,下面展示了在四种不同轨迹条件下的世界模型生成的效果,每种轨迹都从相同的初始帧开始。

左门轨迹

右门轨迹

弹奏空气吉他

世界模型的主要价值来自于模拟对象交互。在抓取盒子实验中,研究团队为模型提供相同的初始框架和三组不同的动作来抓取盒子。在每种情况下,所抓取的盒子都会根据夹具的运动而被提升和移动,而其他盒子则保持不受干扰。

即使没有提供动作,世界模型也会生成看似合理的视频,例如学会驾驶时应避开人和障碍物:

长视野任务

模型还可以生成长视野视频。下面的示例模拟了完整的T恤折叠演示。T恤和可变形物体往往很难在刚体模拟器中实现。

故障

对象连贯性

模型可能无法在交互过程中保持对象的形状和颜色,有时对象甚至可能会完全消失。此外,当对象被遮挡或以不利的角度显示时,它们的外观可能会在整个生成过程中变得扭曲。

物理定律

左边的生成结果表明模型对物理特性有了新的理解,当抓手松开勺子时,勺子掉到桌子上就证明了这一点。然而,在很多情况下,模型生成结果都未能遵守物理定律,例如右侧的盘子悬浮在空中。

自我认知

研究团队让EVE走到镜子前,以观察它能否生成与镜子中动作相一致的行为。

结果显示,模型虽然开始自我反思,但没有出现「自我识别」或「自我理解」的觉醒。

THE END
1.译介丨《辐射TRPG》2D20系统人物建卡指南机核GCORES我没有翻译规则书里机器人和僵尸避难所居民的部分,因为我个人确实不喜欢这样的设定。我也不会在我...你有一只宠物狗,它在危险时期充当朋友和盟友。 这只狗的数据如下所示,在你的指挥下,它被视为NPC...炉心溶解 级别:1 要求:PER 10 当你用能量武器杀死敌人时,他们会爆炸。掷下相当于武器伤害等级一半的...https://www.gcores.com/articles/147035
2.www.gzwenhua.net/fancai75273199.htmMM视频超色91免费 成人动漫图片久久中文字幕 国产av一级 482.33MB 215好评 美女隐私黄色视频 白丝袜BBw 第三套太极功夫扇背面演练 420.28MB 937好评 /fancai75273199.htm 展览现场?。 “因为剧组里面很无聊啊,我当然要给自己找点事情做了。”牛奕辰说道:“至于邓家佳,那是因为我刚好想到了一个电视...http://www.gzwenhua.net/fancai75273199.htm
3.机器之心(上海)科技有限公司(中国(上海)自由贸易试验区张衡路200...了解企业详情:付费查询机器之心(上海)科技有限公司的企业法人、经营状态、注册资本、企业类型、登记日期、经营期限、企业地址、经营范围、股东信息、成员信息、公司年报、投资公司、企业高管、分支机构、商标信息、诉讼信息、变更信息、经营异常信息、对外投资等等。 https://gongshang.mingluji.com/shanghai/name/%E6%9C%BA%E5%99%A8%E4%B9%8B%E5%BF%83%EF%BC%88%E4%B8%8A%E6%B5%B7%EF%BC%89%E7%A7%91%E6%8A%80%E6%9C%89%E9%99%90%E5%85%AC%E5%8F%B8
4.教育部推荐的152个中小学综合实践活动观察身边常见的动植物,如校园植物、家庭(社区)宠物、大自然中的各种昆虫、农田中的动植物等;选择其中一种或多种进行小实验、分析与研究,了解其自然特征(习性)并自觉加以保护,增强关注自然、热爱自然的情感,提高科学探索能力。 5.生活垃圾的研究 收集资料、了解国内外垃圾分类和处理的有关内容,调查、了解身边各种生活...https://www.jianshu.com/p/5da7ce64e49e
1.超级机器人大战30阿姆及蕾茜机师怎么样《超级机器人大战30》中的阿姆和蕾茜全名梵内利亚·阿姆和加乌·哈·蕾茜,是动画《重战机L-Gaim》中的重要角色,但是很多玩家都不太清楚阿姆及蕾茜机师到底怎么样,其实阿姆和蕾茜机师都不算强,ace也很鸡肋,加上重战机好用的机体少所有能不用就不用,更多如下。 https://m.3dmgame.com/mip/gl/3838921.html
2.“2019中国女性创业者30人评选”正式启动丨寻找中国女性创业者代表陈丽苹创立并运营的扩博智能是一家以机器视觉为核心推动,在能源、零售行业开创产业升级的服务公司,创新地开创了风电停机检测,同时也提升了安全等级。 陈璐,转转联合创始人兼COO 察觉到了二手交易市场的机遇和痛点,陈璐创立了转转。不同于其他同类型平台,转转的创新之处在于“介入服务”,包括质检、运输、售后等。这让...https://www.iyiou.com/analysis/20190826110389
3.www.52deepjoy.cn/apfnews11721822.shtml宝宝你好会夹在车上视频 欧美三级午夜理伦三级18禁宠物 印度人又粗又长又硬在线视频 日本黄色插插视频...999久久久久久青草 超pen个人视频亚洲 美国伦理眉睫膏2 一进一出抽搐白浆 成年人黄页大蜜桃 下面含...娇妻引狼入室被黑人征服 5天前 被绑在机器上榨精失禁 亚洲garychinese18 2天前 女生把筷子放屁眼里...http://www.52deepjoy.cn/apfnews11721822.shtml
4.洗衣公司总结范文6篇(全文)六、加强洗涤机构的维修保养,责任到人。机械操作人员应熟练掌握设备性能、不准超负荷运转或空转。机器发生故障应及时报告有关人员进行维修处理。一般人员不得随意修理,严防事故发生。 七、保持车间、工作间的清洁卫生,坚持班前清整周末大扫除制度。 八、做到工作人员的工作服与病人的被服分开洗涤。 https://www.99xueshu.com/a/Qgkhamwakhgs.html
5.小发明科技论文(精选16篇)日本万代公司发布了一款可与iPhone手机结合玩耍的智能机器宠物玩具狗。这款机器玩具狗是没有脸部的,这当然就需要iPhone手机来充当了。只须通过手机下载一款专用的控制软件,再将iPhone手机放入狗狗脸部位置的卡槽内,它就变成了一只生动活泼的小狗狗了。宠物玩具狗所有的面部表情完全由iPhone手机屏显示,用户可以通过手势、声...https://www.360wenmi.com/f/file8xb0hrze.html
6.互联网早报7月22日星期三星巴克“啡快”服务全面接入阿里...4、虾米音乐与MQA“牵手”一年,超高音质使用者增幅超30% 5、首部国产动画片成功“出海”,《无敌鹿战队》将登陆尼克儿童频道 金融财经 1、中国太保:同意出资成立太保金融科技有限公司,注册资金7亿元 2、支付宝保险平台开放鼻纹识别技术,并联合大地保险、众安保险首次应用于宠物保险 ...https://maimai.cn/article/detail?fid=1504893964&efid=E9avdyUV5wwtH7pVDINJPg
7.蚂蚁新村每日答案汇总支付宝今日蚂蚁新村答案最新羌笛演奏及制作技艺是国家级非物质文化遗产之一。 3.13 “用爱宠物之心定格美好记忆”是对哪个职业的贴切描述宠物摄影师 这是对宠物摄影师的贴切描述。宠物摄影师不仅要具备基本的摄影技巧,还要懂得和动物打交道,往往需要极大的耐心以及对宠物行为的透彻了解,才可以预判并抓拍到宠物最精彩的瞬间。 3.12...https://app.ali213.net/gl/713731.html
8.白菜价集锦11.8一次用药,可保半年无忧,是世界卫生组织的推荐产品,也是航空专用杀蟑饵胶。国际食品HACCP安全认证,有儿童、孕妇、宠物的家庭也可以安全使用。...进口安全材料,使用安全放心,一台机器可以做出6种不同的面来,满足不同需求。九阳大品牌,产品质量值得信赖。 商品:华劲凯威 四川蒲江 黄心猕猴桃 5斤...https://www.mitaowu.com/jujiashenghuo/76708.html
9.机械之心加速器机械之心加速器下载安卓/iOS免费加速机械之心加速器游戏介绍 机械之心加速器游戏简介 哔……系统修复正在进行中 ...修复成功,通信连接就绪 ... br/>10%...30%...50%...80%...99%... "启动锤子,建造一座塔来拯救世界……咳咳,您好,勇敢的修复机器人1,很抱歉将您留在这个充满怪物的星球上,但是为了宇宙的和平,您的任务是消灭所有这些怪物...https://www.9game.cn/accelerate/jxzx/
10.30个常用机械动画电影10.《机器人之心》 这是一部探索人工智能、情感和道德等主题的电影。它讲述了一名警探试图调查机器人杀人事件,却发现自己与机器人结下了深厚的友谊。 11.《铁甲奇侠》系列 这是一部关于一个青少年发明家变身为高科技英雄,用他自己制造的装备保护世界的动画电影。 https://www.yujindh.com/news/13771.html
11.活动召集丨实时多模态AIBuilder团聚!RTEOpenDay@S创上海,9.20/21...西湖心辰是一家专注于人工智能多模态大模型技术研究与产业化应用的创新企业。我们自主研发的「西湖大模型」,具备卓越的语义理解、逻辑推理、知识整合与多轮对话能力;Lingo 语音端到端大模型,以其实时打断、实时控制和超拟人化交互领先业界。公司源自西湖大学深度学习实验室,汇聚顶尖人才与算力,致力于构建深度定制的多模...https://blog.csdn.net/agora_cloud/article/details/142280385
12.迈瑞aed训练机心肺复苏CPR急救培训练习自动体外除颤仪教学机器兽用全自动三分类血细胞分析仪3070VET宠物血常规检测动物血球仪 价格: US.$2315.48 ≥0 医用血氧饱和度检测仪 指脉氧血氧PR脉率检测仪便携血氧仪 价格: US.$651.23 ≥1 迈瑞aed训练机心肺复苏CPR急救培训练习自动体外除颤仪教学机器 价格: US.$868.31 ≥2 母胎监护仪科曼C22产科专用监护母婴胎监待产房孕妇胎...https://www.buy2you.com/zh-CHS/1688wholesale/china_alibaba_item/672529549744.html
13....机制的突破与敞开———论科幻小说?我这样的机器...论科幻小说 ?我这样的机器克拉拉与太阳? 中的人机关系 [J].常州 大学学报 (社会科学版...主人对于宠物的支配管理权力在这一刻是悬置无效的.德里达由此将 动物视作具有审视能力的,智慧的 "他者...活在荣光之中———他自己这么说的———仍然拥有物质的核 心本质所赋予的意识" .[7]282283 ?...https://xuebaoskb.cczu.edu.cn/oa/pdfdow.aspx?Sid=202306011
14.科技文摘“布默”是一款多功能敏捷型遥控机器人,作为军事用途的机器人,它的上面安装有摄像头,看起来有点像一个长颈玩具卡车。这支部队的战士们已经和机器人建立了感情,当它“死去”的时候,他们就像对待心爱的宠物一样去哀悼它。在它的葬礼上,布默被授予了2枚勋章,这是著名的紫心勋章和青铜星勋章,伴随着21响礼炮,战士...https://www.whb.cn/zhuzhan/kjwz/20180712/203671.html