在当地时间周一揭幕的行业顶级会议SIGGRAPH(国际计算机协会计算机图形学和交互技术特别兴趣小组年度会议)上,“全球股王”英伟达推出一系列面向机器人开发者的世界模型、应用库和基础设施。
其中 ,最引人关注的是参数量只有70亿的开源物理AI应用和机器人视觉推理模型Cosmos Reason 。
英伟达介绍称,自从OpenAI多年前发布CLIP模型以来,视觉语言模型已经改变了计算机视觉任务 ,例如物体与模式的识别等。然而,此前的模型无法解决多步骤任务,也难以应对模糊或新颖的现实体验。
凭借记忆和理解能力 ,Cosmos Reason能够使机器人和AI具身代理“像人类一样推理 ”,并在真实世界中采取行动 。
在英伟达给出的案例中,运行视觉推理模型的机器人手臂 ,成功根据“面包+烤面包机”的场景,推断出最合理的下一步动作是将面包放进烤面包机进行烘烤,并将思考逻辑转化成机器手臂的操作指令。
(来源:英伟达)
这项功能叫做“机器人规划与推理”。Cosmos Reason能够作为机器人的“大脑 ” ,负责有意识、条理化的决策 。视觉推理模型能够解释环境,并在面对复杂指令时将其分解为任务并利用常识执行。
除此之外,这个模型还能用于一系列AI应用。例如自动化对大规模 、多样化训练数据集进行整理、标注,也能从海量视频数据中提取有价值的信息并进行归因分析 。
目前这个模型已经投入商业化运营。英伟达披露 ,公司内部的机器人和自动驾驶团队正使用这个模型进行数据整理与过滤、标注以及VLA(视觉语言动作)后训练。优步(Uber)也在使用该模型为自动驾驶训练数据进行标注与生成说明 。
除此之外,麦格纳国际正在使用该模型开发全自动即时配送解决方案City Delivery,用来帮助车辆更快适应新城市环境。VAST Data 、Milestone Systems也在交通监控自动化、视觉检测等领域应用该模型。
除了Cosmos Reason ,英伟达也在Cosmos世界模型中新增了Cosmos Transfer-2,用来加速从3D仿真等场景生成合成数据,以及一个经过蒸馏、更为注重速度优化的Cosmos Transfers版本。
英伟达也在周一更新了Omniverse软件开发工具包 ,并公布了新的神经重建库 。其中包括一种渲染技术库,允许开发者使用传感器数据在三维中模拟现实世界。
这一系列发布标志着AI芯片巨头正在加码进军机器人领域,试图将其培养成AI数据中心之外的下一个重要应用场景。
炒股如何开杠杆:最新股票配资平台-多家国际投行上调中国经济增速预期
正规网上实盘配资:股票配资一览表最新-监管出手!因涉嫌内幕交易 亚钾国际监事被立案调查
中国正规股票app排名:配资炒股平台入配资-知名机器人企业老总提议给自己发200万元固定月薪 被投资人“手撕”:这是在掏空公司
炒股开户平台:股票配资实盘平台-“夺回首都” 特朗普最新发声!所有无家可归者将被立即迁离市区
高杠杆股票:炒股配资平台技巧-家电龙头卡位人形机器人赛道 抢“入场券”还需经历长跑
财经:股票最新配资平台-科创综指ETF鹏华(589680)实现四连涨,一键打包科创板优质资产,共享产业发展红利
一直牛配资提示:文章来自网络,不代表本站观点。
3月7日下午,亚振家具(603389.SH)发布公告称,预计2024年度归母净利润将为负值,且扣除与主营业务无关的收入后...
2025年4月9日,浙江医药(600216.SH)公告称,公司董事长李男行提议公司使用自有资金或自筹资金通过集中竞价交易...
记者|张乔遇近日,奥克斯电气有限公司(以下简称“奥克斯电气”)向香港联交所递交上市申请,中金公司为独家保...
国内期货夜盘开盘涨跌不一,沪金涨0.02%,沪银涨0.35%,沪铜跌0.38%,铁矿跌0.52%,原油涨0.88%,菜粕...
根据新股发行安排,今日有1只新股申购,江南新材(603124.SH)发行价格为10.54元/股。特别提示:对于不...