$商汤W(00020)$ 商汤科技 松应科技:商汤代码小浣熊,助力机器人大脑的开发效率提升100倍!原创 田丰 商汤 ... 

科学从不试图解释什么,甚至几乎从未想过让我们理解什么,它们主要提供模型。

——冯·诺依曼

一、机器人在仿真世界中快速成长

其中最有趣的是,IsaacSim可扩展的机器人仿真环境,以像照片一样逼真、物理精确的高保真度仿真环境,测试、训练基于AI的机器人“数字分身”,让机器人具有像人类一样面对陌生复杂环境的随机应变能力。

1

工业制造业仿真模拟:

2

机器人仿真模拟:

3

科研仿真模拟:

二、松应Orca:当中国3D仿真平台遇见中国大模型

继续观看

观看更多

转载

,

视频详情

在高效快速构建3D场景的基础上,通过ORCASim机器人模拟套件,以视觉效果逼真、物理正确的高保真度仿真环境,测试、训练基于AI的机器人“数字分身”,让机器人具有像人类一样面对陌生复杂环境的随机应变能力,大大提升机器人的智能水平。

“我们要做中国的‘物理世界模拟器!’”松应科技创始人兼CEO聂凯旋坚定地说。

松应科技的创业“第一性原理”有个三步走策略:

定战略:

做产品:

一是OrcaStudio成为所有仿真数据入口,通过Connector和DataLink数据管线打通和汇聚所接入的各种3D资产元素,基于统一标准的OpenUSD内容描述格式建立云端资产库,覆盖常用的模型、场景、贴图等3D内容和场景资源,让跨软件、跨地域、跨部门的专业用户,能够实现三维仿真的“所见即所得”、“全球标准化”,设计信息实时反馈、高度敏捷化工作、生产流程高度精益化。

二是以Orcastudio为统一工作协同平台,根据碰撞仿真、流体仿真等用户具体要求,链接专业CAD、CAE设计软件和物理引擎,实现视觉效果逼真,物理效果正确的保真度仿真环境,实现sim2real的真实仿真。

找场景:

为了更好地提升具身智能机器人的鲁棒性,需要考虑和覆盖尽可能多的异常场景(cornercases)。越是长尾场景、稀有场景、复现客户异常场景,越有仿真训练价值。

例如清洁机器人在数字仿真的商城环境中巡逻,更精确地提前发现地上有衣物、碎纸屑等大型异物,避免吸入导致机器发生故障;在地板大理石等材质强烈反光情况下精确识别出积水;有时当机器人走出楼梯外的平坦地板,但地面反光倒影是之前走过的楼梯,摄像头识别出下楼梯环境,激光雷达发现是电梯出口,造成识别决策异常;又如在工厂、企业仓储物流的数字孪生环境中,上百台AMR机器人需要提前做好规划,多少台机器人、按照什么路径行动,都需要在虚拟环境中测试出最佳部署方案。

虽然人脑无法进行复杂计算,但却以低精确度进行大量便捷的并行计算,快速得出符合逻辑的正确结论。而机器人虽然是远高于人脑的计算量与精度,但对非常复杂的世界环境缺乏理解,所以松应科技在3D实时模拟仿真软件中,必须重现物理属性准确的可交互环境。

和动画中只能看的物体贴图不同,仿真环境中所有的物体都需要具备物理属性,以便机器人能够精准交互操作,例如一个茶杯,包括3D尺寸、光照、重量、材质等物理特征。

具有如下几大优势:

3D仿真资产丰富,多次重用摊薄成本:

例如当模型师为机器人测试生成了一个合格的咖啡厅场景后,今后其他行业需要咖啡厅场景时,只需要现有仿真场景资产上做二次微调,很快就能使用,以往1个星期的工作量现在1天就能完成,多元化场景库积累越丰富,仿真测试效率越高。

大模型理解物理逻辑:

4

机器人控制系统随时同步:

每个机器人都由ROS机器人操作系统控制,AI或人工控制虚拟环境中的机器人,也能同步控制真实物理环境中的机器人,保持开发、测试、运行环境机器人配置同步。

5

机器人合成数据生成速度快:

国产机器人公司,通过OrcaStudio生成仿真场景环境,能在虚拟环境中同时调度1000个数字机器人并行训练,生成大量高质量的合成数据,甚至可以用2D场景图片转化生成3D场景,源源不断的合成数据对具身智能的机器人大模型调优效果非常有好处。

例如让一个物理机器人端杯子倒水,测试人员每次都要手动改变杯子所放位置,看看机器人能否成功完成倒水任务,现在靠AI根据要求自动调整杯子位置作为测试用例,效率天壤之别。

6

国产机器人仿真训练价格便宜:

7

国内安全存储数据,本地技术支持:

8

改变工厂管理模式:

在新型智能工厂的规划、设计、建设、测试、运营、改进、升级换代每个阶段,高质量仿真的数字孪生工厂都能由大模型和人类厂长协同改良优化,数字模型与数据真正作为资产沉淀,物理工厂与全动态数字工厂同时并存、协同运营,未来在工厂升级换代的时候,也可以有序传承。

三、大模型+机器人浪潮:上半场是知识工程,下半场是工业革命

ChatGPT横空出世,已经彻底改变了拥有3年左右工作经验的脑力劳动力工作模式,而当大模型驱动的通用人形机器人诞生后,亚洲“世界工厂”中的海量劳动力成本将不再具有任何优势,第三次工业革命将席卷全球。

为了抢占未来产业高地,从中国人形机器人的实际情况出发,聂凯旋认为需要依靠“举国体制”重点解决三个核心挑战:

工业数据和工业软件“卡脖子”:

没有掌握工业软件平台就很难汇总工业大模型、人形机器人急需的大量制造业数据,以松应科技为代表的国产3D仿真模拟平台也就“无米下锅”。

建议我国依靠国家数据局牵头,建立工业数据交易交换与机器人训练统一平台,以专项政策动员制造业细分赛道的龙头链主企业,将数据放入中国自己的“国产Omniverse平台”,利用人工智能技术、3D仿真模拟技术,在数字孪生工厂上开发改进自己的智能制造大模型,同时也能够以商业合作形式为人形机器人创业公司赋能服务。

国产化芯片带不动3D仿真引擎:

一方面图形渲染的“硬”能力不足导致国产3D仿真开发速度落后于国际友商项目开发水平。

另一方面,硬件落后使建立软件生态更是无从谈起。建议从解决实际产业问题角度出发,对国产GPU芯片、图形显卡芯片进行研发攻坚,既要加大投入,也应解决瓶颈问题。

工业智能平台缺少链主企业积极投入

聂凯旋认为工业智能平台的链主应该是在制造业具有势能并有积极变革动力的领军企业,以工业数据牵引国产工业大模型、国产人形机器人的产业链协同研发。

在产业链变革的浪潮中,松应科技作为创业公司,愿意与有志于实现工业软件高质量发展的伙伴一道,共同为国产化工业智能平台贡献力量。

松应科技目前通过向科研院所、高校开源Orca仿真软件,逐步取得工业软件、传感器等工业上下游服务商信任,正在以标准API接口引入几百款工业级软硬件产品。

THE END
1.浣熊直播软件浣熊直播软件,三江源国家公园管理局生态展览陈列中心 ,三江源国家公园管理局党委举行局系统“老干部荣誉退休仪式” “新时代 新青海 新征程” 三江源国家公园专场新闻发布会举行 三江源国家公园管理局开展“学习贯彻习近平生态文明思想”大讨论 习近平...http://blog.sjyszzc.cn/tags-851.html
2.数字浣熊互动娱乐科技(北京)有限公司数字浣熊互动娱乐科技(北京)有限公司成立于2017年1月,是一家专注于游戏行业的公司。浣熊游戏始终坚持“诚信为本、客户至上、互惠互利,开拓创新”的企业宗旨,本着“本质为本、专业执着、精益求精”的经营销售理念,力求给客户提供全方位优质服务。 基本资料 http://www.kulemi.com/27473/
3.数字浣熊互动娱乐科技(北京)有限公司公司网址http://www.raccoon-games.com/ 所属行业游戏开发 企业发展阶段已获战略投资 关键词数字浣熊互动娱乐科技(北京)有限公司_数字浣熊 公司描述 数字浣熊是一家专注于研发的原创游戏开发商,也是一个原创游戏研发平台,以成为全球玩家喜欢的游戏公司为目标。 http://wydb.leshanvc.com/46051.html
4.数字浣熊互动娱乐科技(北京)有限公司招聘数字浣熊互动娱乐科技(北京)有限公司成立于2017年,是一家专注于研发的原创游戏工作室。以成为全球玩家喜爱的游戏公司为目标,深研国风及二次元风格产品,在行业内以优秀的美术风格设计见长;技术研发实力突出,目前已开发出多个研发工具以及2条完整的产品研发线。公司以中国风及二次元作为差异化定位,目前已全球上线运营手机...https://www.liepin.com/company/9279593/
5.恺英网络战略投资企业数字浣熊完成新一轮融资日前,恺英网络战略投资企业数字浣熊互动娱乐科技(北京)有限公司(简称“数字浣熊”)获得新一轮融资,投资方为北京文投集团旗下北京京西文旅产业投资基金。本轮融资将全部用于数字浣熊研发团队的扩建及运营,助力数字浣熊在精品游戏研发方面持续发力。https://m.yicai.com/brief/101309243.html
1.媒体报导–OSL集團BC集团(863)收购区块链工程公司数字资产组合管理系统 2020年08月13日 BC科技料对冲需求续刺激数字资产交易 2020年08月12日 Catch up on the state of the digital asset sector with Dave and FINTECH.TV 2020年08月03日 BC科技首席执行官Hugh Madden于香港经济日报分享近期数字资产的上升趋势 ...https://bc.group/zh-hans/mediacoverage/
2.“浣熊总动员”商标购买详解首先,选择合适的商标交易平台至关重要。在众多的商标交易网站中,鲸标网因其专业的服务团队、严格的审核机制以及便捷的操作流程而备受青睐。对于想要购买“浣熊总动员”这样独特且富有创意的商标的企业和个人而言,鲸标网无疑是一个值得信赖的选择。 进入鲸标网后,用户可以利用站内搜索功能快速找到目标商标——“浣熊总...https://jingbiaow.com/news/16093.html
3.互动数字展厅网站互动数字展厅价格蓝湖数字申请数字化展厅多媒体系统专利,增强访客互动体验和学习效果金融界2024年11月11日消息,国家知识产权局信息显示,江苏蓝湖数字科技有限公司申请一项名为“数字化展厅多媒体系统一体化集成控制与展小发猫。 根据访客的偏好和历史互动数据,调整展示内容和导览信息,这种个性化服务增强了访客的互动体验和学习效果,使展厅参观...https://www.filmonline.cn/s7co8c2a.html
4.TRON区块67070990区块链浏览器OKLinkBitcoinEthereumTRONDuckchain MainnetNewPolygonBNB ChainX LayerFractal Bitcoin NewApeChain NewBOB MainnetNewGravity Alpha MainnetBitlayer MainnetB2 MainnetBEVM MainnetPolygon zkEVMOP MainnetBaseArbitrum OneManta PacificzkSync EraTether USDSolanaSuiAptosAvalanche-CLineaopBNB MainnetScrollStarkNetCantoFantomCosmos...https://www.oklink.com/zh-hans/trx/block/67070990
5.筑牢数据基础设施蓝象智联发布首款数据智联器11月20日,蓝象智联新品发布会在世界互联网大会-“互联网之光”博览会上成功举办。发布会上,蓝象智联重磅发布了基于隐私计算的数据流通利用基础设施-蓝象盖亚数据试衣间及蓝象盖亚数据冷链平台;推出首款数据接入连接器-蓝象盖亚智联器,吸引了政府领导、媒体代表、品牌客户以及业界同仁的广泛参与与关注。 https://www.trustbe.cn/newsinfo/7778999.html
6.「数字浣熊怎么样」数字浣熊互动娱乐科技(北京)有限公司性质: 民营公司 规模: 50-99人 成立: 7年 行业: 餐饮业 新能源 全称: 数字浣熊互动娱乐科技(北京)有限公司。 发展阶段 排名: 北京互动娱乐人气排名第33名 荣誉: 科技型中小企业 瞪羚企业 根据算法标注 工资: 80.8%的岗位拿15-30K,2024年较去年增长7%。 招聘: 2024年较2023年下降57%。 公司介绍...https://www.jobui.com/company/13830754/
7....字节跳动回应研发AI芯片传闻;欧盟初步认定苹果违反《数字市场...淘宝和小米合作“虚拟试车”;零一万物四款大模型登陆阿里云百炼平台;消息称苹果“平价版”Vision Pro头显可能需配合iPhone/Mac才能使用;台积电据悉协同创意电子拿下DRAM大厂订单;商汤大模型AI办公助手“办公小浣熊”上线微信小程序;腾讯DNF手游5月国内iOS市场收入已超《王者荣耀》《和平精英》总和。 https://www.jiemian.com/article/11323442.html
8.企业数字化转型与解决方案设计官网:www.perfectpx.com 课程背景|Course Background 数字化这个课题是郑老师在从事咨询行业过程中,与国际咨询公司竞合中,在与客户数字化落地小组不断磨合中,寻找出的一套数字化实现方法论,它和其它数字化课题不一样,它更强调战略、组织与数字化的融合,它讲清了在数字化过程中,企业家和高管应该做的事,也讲清数字...https://www.perfectpx.com/training-156/7519.html
9.王维维,数字浣熊,CEOIT桔子数字浣熊 · CEO 关注 人物简介 王维维,数字浣熊CEO。 创业经历 数字浣熊 游戏 2017-01 数字浣熊是一家专注于研发的原创游戏开发商,也是一个原创游戏研发平台,以成为全球玩家喜欢的游戏公司为目标。产品画风突出,擅长设定符合游戏题材的美术风格;技术研发力强,目前已开发出多个研发工具并获得知识产权。 工作经历...https://itjuzi.com/person/162028
10.2022十一黄金周活动策划方案(通用12篇)目前整个口腔市场中的竞争对手还是在纷纷推出“美牙冠”,而我中心需要突破创新,我们不推出“美牙冠”这个概念,而在这个“结婚的旺季”,主力推出“3D数字克隆牙技术”吸引人气。 由于整个十一黄金周占据了十月的大半时间,我中心希望通过十一黄金周的优惠活动来带动整个10月份的门诊量。 https://www.360wenmi.com/f/filei61sba4v.html
11.安全事件周报(08.0108.07)根据区块链研究公司Chainalysis发布的一份报告,亲俄团体主要在比特币和以太坊上筹集了220万美元,以帮助为战争提供资金。加密货币是俄罗斯一种有吸引力的交换媒介,在制裁和切断国际支付系统接入之后,卢布的价值已经下降。数字货币也受到较少的监管,并允许人们从世界任何地方匿名快速转移资金。根据Chainalysis的说法,这些...https://cert.360.cn/warning/detail?id=50b323ce19f33b008d7febb0479141be
12.SenseTime商汤科技办公小浣熊 Racoon 智能办公助手 如影SenseAvatar 数字人生成 秒画SenseMirage AI文生图 代码小浣熊 Raccoon 智能编程助手 商量SenseChat自然语言处理 办公小浣熊 Racoon智能办公助手 如影SenseAvatar 数字人生成 秒画SenseMirageAI文生图 代码小浣熊 Raccoon智能编程助手 ...http://sensetime.com/