头条 热门 重磅原创 PPP 地方 教育 图片新闻 政府采购 权威公告

首页 > 产经   > 文章详情页

端到端VLA是具身智能的曙光吗?这项被Figure AI带火的关键技术有中国团队更早提出并应用

FigureAI在与OpenAI终止合作后,果然发布了大新闻,这家人形机器人公司从外接大模型的方式,转入本地具身大模型来完成机器人的感知、交互与操作,充分展现了本体具身大模型与外接互联

Figure AI 在与 OpenAI 终止合作后,果然发布了大新闻,这家人形机器人公司从外接大模型的方式,转入本地具身大模型来完成机器人的感知、交互与操作,充分展现了本体具身大模型与外接互联网大模型的优势。

根据 Figure AI 有限的技术分享,他最新推出的 Helix 系统是基于视觉-语言-行动(VLA)端到端整体架构演进的一套快慢系统。

借助 Helix,Figure AI 将端到端 VLA 模型运行到自家的双足人形机器人 Figure 02 上,实现了面向场景任务的泛化性。

在 Figure AI 官方展示视频中,机器人一边用头部追踪手部,一边调整躯干姿势,同时能够精确抓取物体。

这种多自由度协调在高维动作空间中极具挑战性,而 Helix 可以做到完美平衡。

究其本质,Helix 是一个能够对整个人形上身(包括手腕、躯干、头部和各个手指)进行高速率连续控制的 VLA 模型,作为 Figure AI 的超级大脑,它完成了所有事情:

像人类一样用眼睛观察、用耳朵听、用手操作,并在没有特别训练的情况下完成全新的任务,有精准的控制能力。

这在视频中得到了充分展现:Helix 驱动的机器人成功抓取数千种新物体,仅需一句「拿起 [X]」,当指令为「拿起沙漠物品」时,它能识别玩具仙人掌并完成抓取。

「Helix 表现出了强大的物体泛化能力,只需用自然语言询问,就能捡起数千种形状、大小、颜色与材料特性各异的新奇家居用品,而这些物品在此前的训练中从未见过。」Figure AI 的创始人兼 CEO 布雷特·艾德考克认为。

Figure AI 此番高举高打的端到端 VLA 架构,实际在硅谷也是非常新的技术。

伯克利机器人行业的顶级团队创办的 PI,在 2024 年 6 月、10 月分别发表了 OpenVLA、PI-0,奠定了端到端 VLA 的圣杯标准,当时获得极大反响。

但这个技术不只是硅谷顶级团队的专利,中国科研力量也在端到端 VLA 舞台上展露过实力。

2024 年 6 月,比 PI 早发表的,针对操作机器人的 RoboMamba 端到端具身大模型,由北大,智平方等合力推出。

这一模型不仅比 PI 的 OpenVLA 更早公开应用,还在未见任务(Unseen Task)的泛化能力上显著超越 Google 的 RT 系列模型,进一步巩固了中国在大模型原创力上的国际声誉。

这是业界能看到的,唯一初创公司参与的端到端 VLA 工作被国际专家认可。

图注:图源 RoboMamba 论文

         

图注:论文介绍了一个名为 RoboMamba 的多模态状态空间模型,旨在提高机器人的推理和操作能力,同时保持高效的微调和推理

论文创新性地将视觉编码器与高效的 Mamba 语言模型集成,构建了全新的端到端机器人多模态大模型。

端到端的背后,是对量产的深入理解。在场景多变的情况下,如何用数据驱动的方式完成系统升级迭代,如何对数据,模型结构,训练方法实现系统级别 AI 突破。这些关键问题困住了大量具身智能领域的入局者。

小鹏、OPPO前首席科学家,微软总部研究员,国家级创新领军人才郭彦东,是首次提出端到端 VLA 架构的人,这来自于他在产业、行业多年的深耕积累,以及他在 AI 原创领域的硬核研发能力。依托技术的先发布局,和大量人工智能软硬一体化结合的量产经验,帮助智平方率先做到了这一点,成为国内最早进行真正商业落地的通用智能机器人公司。

本质上,能做好 VLA 端到端的公司具备对大模型前沿技术的硬核创新能力,其间的点滴积累如能应用到整个 AI+硬件行业,会成为极具价值的存在。

【慎重声明】 凡本站未注明来源为"中国财经新闻网"的所有作品,均转载、编译或摘编自其它媒体,转载、编译或摘编的目的在于传递更多信息,并不代表本站及其子站赞同其观点和对其真实性负责。其他媒体、网站或个人转载使用时必须保留本站注明的文章来源,并自负法律责任。 中国财经新闻网对文中陈述、观点判断保持中立,不对所包含内容的准确性、可靠性或完整性提供任何明示或暗示的保证。

【特别提醒】:如您不希望作品出现在本站,可联系我们要求撤下您的作品。邮箱:tousu@prcfe.com

中国财经新闻网客户端推荐下载

个股排行
排名 名称 现价 涨跌幅
1 汇绿生态 6.02 53.96%
2 灿勤科技 24.65 26.41%
3 腾景科技 34.72 20.01%
4 科恒股份 21.83 20.01%
5 珠海冠宇 62.8 20.01%
排名 名称 现价 涨跌幅
1 翰宇药业 9.36 -16.58%
2 世运电路 20.03 -10.02%
3 天宸股份 8.55 -8.36%
4 C金埔 36.3 -8.31%
5 神雾退 0.12 -7.69%
29秒后刷新
刷新
  • 交通运输部消息,交通运输部办公厅等四部门日前联合印发《关于开展空铁(轨)联运旅客换乘流程优化工作的通知》,力争“十四五”期在部分具备条件的综合客运枢纽实现空铁(轨)联运旅客换乘流程优化。《通知》提到,在具备全封闭免安检换乘通道建设条件的综合客运枢纽,推动铁路、城市轨道交通相关部门认可民航旅客及其随身行李物品的安检结果,为推行空铁(轨)联运旅客换乘流程优化创造条件。(证券时报)

    2021-11-17 19:31:45
  • 金固股份公告,公司与安徽巢湖经济开发区管理委员会签订了《金固阿凡达低碳车轮项目投资合作协议》,根据协议约定:金固股份拟在安徽巢湖经济开发区通过新设子公司投资建设并经营金固阿凡达低碳车轮项目。项目总投资50亿元,规划占地380亩,分两期建设10条阿凡达低碳车轮生产线。其中,一期投资20亿元,共建设4条阿凡达低碳车轮生产线。

    2021-11-17 19:15:51
  • 云路股份披露网上中签结果,中签号码共有20760个,每个中签号码只能认购500股云路股份股票。

    2021-11-17 19:15:23
  • 共同药业公告,公司拟向不特定对象发行可转换公司债券,募集资金总额不超过3.8亿元,拟用于黄体酮及中间体BA生产建设项目及补充流动资金。

    2021-11-17 19:15:08
  • 对于公司原债务融资总部总经理、投资银行总部总经理杜雄飞涉嫌严重违纪违法被调查一事,光大证券党委表示坚决拥护这一决定,并全力配合做好相关工作。各级党组织和全体党员干部要深刻汲取教训,以案为鉴、警钟长鸣,时刻筑牢拒腐防变的思想防线,坚定不移推动全面从严治党向纵深发展。光大证券还对记者表示,“公司会对相关业务进行妥善安排,此事不会对公司的经营管理造成影响。”(财联社)

    2021-11-17 19:14:33
  • 36氪获悉,国泰航空在港交所发布公告,因2019冠状病毒病而实施的旅游及营运限制,预期2021年下半年的业绩将较上半年有显著改善,然而,2021全年仍将录得重大亏损。

    2021-11-17 19:10:18
  • 博深股份公告,在股票停牌期间,公司控股股东与铁投基金就公司控制权转让事宜进行了认真磋商,双方于2021年11月17日达成了《股份转让意向书》,若本次股权交易事项最终达成,公司的控股股东和实际控制人将发生变更。公司股票自2021年11月18日(星期四)开市起复牌。

    2021-11-17 19:09:59
  • 在“双碳”目标下,我国氢能产业发展正步入快车道,已有50多个地级市发布氢能产业规划。业内专家称,国家层面关于氢能产业发展的顶层设计也将出台。机构预计,到2025年,我国氢能产业产值将达到1万亿元;到2050年,氢能在我国终端能源体系中占比超过10%,产业链年产值达到12万亿元,产业前景巨大。 (中证报)

    2021-11-17 19:08:40
  • 北方股份公告,2021年11月17日,公司接到通知,公望元融与国调基金于2021年11月16日签署了《股权转让协议》,公望元融将其所持有的特沃咨询99.9%的股权以人民币6.02亿元转让给国调基金。目标公司直接持有北方股份4278万股,占公司已发行股份的25.16%,为公司第二大股东。

    2021-11-17 19:08:32
  • 11月17日,吉利德科学与金域医学正式签署战略合作协议,在慢性乙型肝炎HBV DNA高敏检测、丙型肝炎常规筛查、HIV(人类免疫缺陷病毒,又称艾滋病病毒)感染者的病毒和肾功能检测,以及医生教育、公众疾病科普和患者教育工作等方面进一步深化合作,共同助力公共卫生事业发展,提升公众健康水平。(证券时报)

    2021-11-17 19:08:04
  • 晶澳科技公告,公司与辽宁省朝阳市政府、辽宁省朝阳县政府于今日签署《投资框架协议》,公司拟于辽宁省朝阳市投资建设“晶澳朝阳综合新能源产业基地”,预计总投资额约为人民币100亿元。

    2021-11-17 18:46:55
  • 辉隆股份公告,公司拟出资1亿元参与投资设立庐江振川一号产业投资基金合伙企业(有限合伙)。基金投向包括但不限于:新能源新材料产业、智能装备制造及汽车零部件产业、磁性材料及电子产业、生物制药产业、新型化工及循环经济产业等领域。

    2021-11-17 18:44:34
  • 锂矿板块今日再迎大涨。国泰君安有色团队电话会议纪要显示,当前供需格局下,锂盐将迎来第三轮涨价,正极材料公司年底前备货是核心催化剂。应该以超级周期视角和估值给到锂,而不是简单的用周期品的思路去对待。(中证报)

    2021-11-17 18:41:41
  • 四天三板合力科技公告,公司主要产品是汽车用模具和铝合金部品,公司不直接涉及新能源汽车,公司主要客户无单纯生产新能源汽车的制造商,公司间接供应于新能源汽车的产品收入很小,相关情况难以统计。

    2021-11-17 18:40:06
  • 港股国泰航空公告称,视乎因2019冠状病毒病而实施的旅游及营运限制,预期2021年下半年的业绩将较上半年有显著改善,然而,2021全年仍将录得重大亏损。

    2021-11-17 18:40:02
  • 全球大型矿企必和必拓一位高管周三表示,未来30年,全球市场对铜的需求量需要相比过去30年增长两倍以上,对镍的需求量则增长四倍以上,才能推动世界实现低碳的前景。(财联社)

    2021-11-17 18:37:39
  • 小摩发布研究报告称,网易上季收入较预期高4%,而纯利则符合预期;由于手游《哈利波特:魔法觉醒》及其他游戏9月强劲收入,预计在线游戏第三季递延收入或高达25亿元,估计股价将呈正面反应;维持网易港股“增持”评级,目标价185港元。(新浪财经)

    2021-11-17 18:37:20
  • 英国国家统计局称,随着英国经济整体价格上涨,通货膨胀率已达到10年来的最高水平,其中燃油和能源成本首当其冲。(新华财经)

    2021-11-17 18:37:15
  • 36氪获悉,科创板上市委公告,陕西华秦科技实业股份有限公司、宁波菲仕技术股份有限公司首发11月24日上会。

    2021-11-17 18:37:11
  • 36氪获悉,哔哩哔哩发布2021年第三季度财报。财报显示,该季度哔哩哔哩净亏损26.86亿元,上年同期净亏损11亿元,市场预期净亏损18.3亿元;Non-GAAP净亏损16.22亿元,上年同期为亏损9.7亿元。截至发稿,哔哩哔哩美股盘前跌超6%。

    2021-11-17 18:26:01
A股指数

上证指数

深证成指

创业板

3537.37

15.58 0.44% 4015.52亿

Created with Raphal 2.0.0 3504 3516 3528 3540

14711.184

97.212 0.67% 6482.90亿

3421.329

27.614 0.81% 698.30亿

    • 两市总计资金流入: 3303.28亿
      两市总计资金流出: 3015.78亿
      净流入:287.51亿
      • 电器制造67.21亿
      • 通信设备43.52亿
      • 有色金属29.69亿
      • 信息技术28.72亿
      • 化学制品26.33亿
      • 通用设备制造15.73亿
    • 两市总计资金流入: 3303.28亿
      两市总计资金流出: 3015.78亿
      净流入:287.51亿
      • 茶酒饮料-9.70亿
      • 卫生-2.03亿
      • 食品制造-1.87亿
      • 金融业-1.78亿
      • 粮食加工-1.56亿
      • 房地产业-0.99亿
右侧广告展示图片
图片新闻
站长统计
Created with Raphal 2.0.0