ADI采用NVIDIA Jetson Thor平台推展人形机器人 实体智能与推理能力 智能应用 影音
D Book
236
外贸协会
DForum1021

ADI采用NVIDIA Jetson Thor平台推展人形机器人 实体智能与推理能力

  • 美通社

人形机器人目前正逐步迈向实际应用部署阶段,其落地节奏取决于实体智能与实时推理能力的发展。随着NVIDIA Jetson Thor平台正式上市,Analog Devices, Inc. (ADI)并将进一步加速人形机器人与自主移动机器人(AMR)的研发进程。

透过将ADI的边缘感知、精密运动控制、电源完整性及确定性连接技术与Jetson Thor的运算能力、Holoscan Sensor BridgeIsaac Sim全面整合,双方正共同为具备推理能力的机器人建构从模拟到实际部署的规模化落地路径。

(Photo by Tara Winstead from Pexels (C) 2021.)
(Photo by Tara Winstead from Pexels (C) 2021.)

实体智能的全新标竿

Jetson Thor重新定义了机器人技术的可能性。该平台搭载NVIDIA Blackwell GPU、Transformer引擎、多实例GPU (MIG)技术、14核心ARM Neoverse V3AE CPU,以及高达128GB的LPDDR5X存储器,能在移动级功耗范围内实现2070 FP4 TFLOPS的服务器级AI运算性能。同时,其高输送量I/O界面(包括4×25 GbE)可提供实时融合密集型多模态传感数据所需的带宽。

凭借此能力,NVIDIA Jetson Thor成为第一个能大规模运行机器人基础模型的平台,从视觉-语言模型到视觉-语言-动作模型均能提供稳定支持。此突破使机器人跳脱单纯的感知层面,进而迈入兼具推理能力与实体智能行为的全新阶段。而这与ADI的研发核心方向高度契合:透过传感、感知、控制与连接技术,让此类推理能力在真实场景中发挥作用,实现高精度的实体互动。

机器人首次能够理解复杂任务。ADI提供精密的物理底层技术,结合NVIDIA Jetson Thor的推理能力,可实时回应现实世界的实体环境。双方携手合作将推动人形机器人从模拟环节稳步迈向可快速部署阶段。

——ADI边缘AI副总裁Paul Golding

基础模型:推理与实体智能的关键

机器人基础模型将数十年的技术难题整合优化,打造出具备多元感知能力的人形机器人,协助实现接近人类速度的灵巧操控动作。不过,此类模型的真正突破在于推理能力:透过整合多模态输入来实时完成任务规划、环境适应与动作执行。

正如ADI在2025年第三季度财报电话会议中所分享,随着此技术变革的发展,ADI的业务也将进一步拓展。人形机器人的每个关节都需要精准的电流、位置与扭矩控制,每一次实体接触都需要触觉与传感回馈,同时还需配备多个感知节点,而每个节点背后,都蕴含着信号链、感知堆叠与电源管理的机会,这些领域均需满足确定性运行与低延迟的要求,而这正是ADI的技术优势所在。

弥合Sim2Real差距

我们正将机器人基础模型嵌入ADI的开发堆叠,借此弥合模拟到现实(Sim2Real)的差距,确保ADI硬件在NVIDIA Isaac Sim中的表现与在真实场景中完全一致。我们的目标清晰明确:在NVIDIA Isaac Sim中建构实体精度最高的机器人相关解决方案,让研发团队既能以模拟速度快速反覆运算方案,又能依托ADI硬件与NVIDIA Jetson Thor,无缝扩展至真实系统并实现部署。

实体智能透过融合传感、执行与策略学习和推理能力,赋予机器人执行精密工业任务的能力。为此,需满足四大核心要求:高传真边缘传感、高能效且功能安全的电源配置与中央运算单元的确定性连接,以及可实现Sim2Real闭回路的数码孪生技术。

目前我们已具备实现此一目标的条件:NVIDIA提供Jetson Thor作为运算基础,ADI提供信号链传真度、电源完整性及相关解决方案,使其实现落地应用。

ADI为人形机器人带来的核心价值

  • 因应频繁接触操作的高传真边缘传感能力:我们正在研发创新型多模态触觉传感技术,同时提供ToF深度传感器、高精度IMU、关节编码器及多轴力/扭矩传感器,可精准捕捉机器人的接触状态与本体感知数据。
  • 精密运动控制与功能安全电源配置:ADI提供电流、位置、扭矩相关的驱动与控制方案,搭配先进的多圈磁传感器,能够实现精准、高能效且安全的执行控制。
  • 与中央运算单元的确定性连接:我们具备时间同步数据连结能力,将针对自身数据架构堆叠优化的定制运算子与Holoscan平台整合,以可控延迟的方式将高密度传感器与感知数据流程传入NVIDIA Jetson Thor。
  • 模拟与数码孪生准确度:ADI针对NVIDIA Isaac Sim/Omniverse提供的高品质传感器模型及参数化元件行为类比功能,与ADI硬件完全匹配,能够提升策略迁移效率,实现从模拟环境到真实系统的任务完成率。

ADI机器人技术堆叠如何适配Jetson Thor平台?

  • Holoscan Sensor Bridge借助NVIDIA JetPack 7实现确定性数据登录,透过针对ADI数据堆叠优化的Holoscan运算子,将ADI传感器/执行器的同步数据串流至NVIDIA Jetson Thor的GPU/CPU,且全程保持可控延迟。
  • 4×25 GbE互连技术可实现机器人手部、手臂、躯干及感知节点间的高输送量、时间对齐数据融合,凭藉ADI连接技术专长,确保感知-推理-动作闭回路的同步性与低延迟。
  • Thor平台的2070 FP4 TFLOPS运算性能支持NVIDIA Isaac GR00T等基础模型及 VLM/LLM推理任务,ADI的触觉传感器、ToF深度传感器、IMU及编码器输入数据可增强模型训练与运作策略,使实时推理具备物理精准性。
  • 基于MIG的工作负载分区可将GPU划分为独立算力切片,分别用于移动控制、抓取规划、感知处理及VLA策略,简化功能分解流程。

 

NVIDIA Jetson Thor大脑,以ADI的高精度传感、信号链传真度及确定性连接为神经系统,我们正加速推动机器人从NVIDIA Isaac Sim走向工厂厂房,并确保其具备物理精准性。

——ADI边缘AI副总裁Paul Golding

推理与实体智能的未来展望

透过观察,我们了解物流、农业及手术机器人领域对人形机器人的需求正持续攀升。前缘应用场景包括数据中心与汽车制造中对线缆元件的灵巧操作,这类任务对速度、精度与可重复性有着极高要求。双方在NVIDIA Isaac Sim中就数码孪生与策略训练展开协作,将ADI技术堆叠与NVIDIA Jetson Thor深度整合,不仅能满足此一需求,更将缩短人形机器人从概念到量产的周期。

这套技术堆叠(高精度传感、确定性连接及基于数码孪生的策略训练)同样可拓展至其他平台,例如AMR。目前,我们正与NVIDIA合作,透过IMU、深度传感器及轮式编码器将ADI的感知技术整合到cuVSLAM中。而这仅只是开始,NVIDIA Jetson Thor的推出为我们与NVIDIA的合作开启了新篇章。欢迎关注ADI官网LinkedIn帐号,掌握可应用于您专案的最新动态与信息。

产品供应及后续步骤:

  • NVIDIA Jetson AGX Thor开发者套件与NVIDIA Jetson T5000:有关目前产品供应情况、NVIDIA JetPack 7支持情况及订购方式,请谘询NVIDIA官方管道。
  • ADI评估硬件与软件:请联系ADI机器人团队,协助您将传感器、电源及连接技术路线图与基于NVIDIA Jetson Thor的设计相匹配,并探讨如何提前取得模拟模型与触觉传感技术。

关于ADI

Analog Devices, Inc. (NASDAQ: ADI)为领导全球的半导体公司,致力于在现实世界与数码世界之间搭起桥梁,以实现智能边缘领域的突破性创新。ADI提供结合类比、数码和软件技术的解决方案来推动数码元元化工厂、汽车和数码医疗等领域的持续发展,因应气候变迁挑战,并建立人与世界万物的可靠互联。ADI 2024会计年度收入超过90亿美元,透过全球约2.4万名员工,ADI协助创新者不断超越一切可能。更多信息请浏览www.analog.com

欢迎前往浏览、交流并关注ADI 台湾 LinkedInFacebookYoutube频道 

订阅 ADI 的每月类比对话杂志 (Analog Dialogue)请参阅: 

www.analog.com/library/AnalogDialogue