首页 » 互联网 » 基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人

基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人

萌界大人物 2024-12-13 15:42:14 0

扫一扫用手机浏览

文章目录 [+]

根据中国打算机学会的定义,具身智能横跨人工智能、机器人学习、打算机视觉等学科,属于有物理身体的智能体通过与物理环境进行交互,从而得到智能的人工智能研究范式。
那么,如果工程师想要搭建自己的具身智能创新方案,该如何做呢?

那么,在这里我们向大家推举英伟达的Jetson Thor芯片方案以及干系的配套资源。

基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人 基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人 互联网

专门为机器人运用打造的Jetson Thor

1950年图灵首次提出具身智能观点,但在那之后具身智能并没有取得很大进展,很主要的缘故原由便是基于当时的软硬件资源,具身智能切实其实便是天方夜谭。
在ITF World 2023半导体大会上,英伟达创始人兼首席实行官黄仁勋重提具身智能,他认为人工智能下一个浪潮将是具身智能”。

基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人 基于英伟达Jetson Thor芯片若何快速实现具身智能筹划立异?_英伟_机械人 互联网
(图片来自网络侵删)

在GTC 2024上,英伟达发布了专为人形机器人打造的Jetson Thor芯片平台,这款芯片融入了非常多的英伟达关于具身智能发展的“know how”。
在Jetson Thor发布之前,英伟达在机器人领域已经发布了多款芯片方案,包括Jetson Orin、Jetson Orin Nano和Jetson AGX Xavier等。

Jetson硬件路线图,图源:英伟达

并且,正如英伟达所言,每一款Jetson系列产品都是一个完全的系统模组 (SOM),个中包括 GPU、CPU、内存、电源管理和高速接口等。
以Jetson Orin模组为例,最高可供应高达每秒 275万亿次浮点运算 (TOPS)的算力,拥有4GB到64GB内存配置,模组功耗在7瓦到60瓦之间。

Jetson Thor延续了Jetson系列高性能的传统,可供应每秒800万亿次8位浮点运算AI性能,并集成功能安全处理器、高性能CPU集群和100GB以太网带宽。
正如笔者此前文章提到的,Jetson Thor基于英伟达Blackwell架构,担保了该芯片的高性能。
和英伟达上一代Hopper架构比较,Blackwell架构在各项性能方面都带来了数倍的提升。
并且,Blackwell Tensor核心增加了新的精度,基于该架构打造的第二代Transformer引擎支持4位浮点数AI推理,打算能力和模型规模提高一倍。

根据英伟达的先容,Jetson Thor能够实行繁芜的任务并安全、自然地与人和机器交互,具有针对性能、功耗和尺寸优化的模块化架构。

环绕Jetson系列丰富的开拓资源

如上所述,英伟达Jetson系列是面向机器人开拓的办理方案,知足各种运用的性能和预算需求。
在这套方案中,除了高性能、高度集成的芯片平台,还有丰富的配套资源。

比如,面向产品开拓的开拓者,Jetson系列整合JetPack SDK、Metropolis微做事、生产就绪的Isaac ROS软件包和特定于运用程序的参考AI事情流程。

JetPack SDK是Jetson软件堆栈的源头,供应Jetson Linux、开拓职员工具、CUDA-X加速库和其他NVIDIA技能。
JetPack SDK构建了用于各种机器人运用的底层能力,借助JetPack SDK,开拓者可以利用TensorRT和cuDNN用于加速AI推理,CUDA用于加速通用打算,VPI用于加速打算机视觉和图像处理,Jetson Linux API用于加速多媒体,libArgus和V4l2用于加速相机处理。

同时,借助Jetson Linux,开拓职员可以开拓各种运用程序,工具包中包含Linux内核、勾引加载器、NVIDIA驱动程序、闪烁实用程序、示例文件系统和Jetson平台的工具链,使得运用程序开拓非常迅捷。
总结来说,在JetPack SDK中,拥有非常丰富的细分功能的SDK,工程师朋友可以根据自己的须要去选择。

我们再看一下Isaac ROS软件包,它是一个用于机器人操作系统的软硬件加速包,包括多个开源选项。
Isaac ROS供应具有图像处理和打算机视觉功能的单个软件包(GEM)和完全管道(NITROS),帮助机器人运用构建高吞吐量的感知系统;模块化软件包的Isaac ROS让开发职员可以根据自己的须要来更换部分算法;Isaac ROS拥有非常出色的兼容性,能够大幅缩短机器人方案的开拓周期。
总之,Isaac ROS是一个功能丰富且模块化的感知软件包,为机器人运用程序带来高性能感知和硬件加速。

面向教诲事情者、学生和发热友,英伟达也供应Jetson Nano开拓者套件,能够帮助这类型的开拓者进行教授、学习和开拓AI与机器人领悟的方案。

除了丰富的配套开拓资源,我们还要重提英伟达在具身智能大模型方面的前辈理念,英伟达Project GR00T人形机器人根本模型是一个VLA类型的模型,具备措辞、动作和专业机器人知识模态,是未来具身智能开拓的主流模型路线。
这些知识和资源,开拓者都可以从英伟达GR00T项目或者 Isaac工具组合中去获取。

结语

英伟达Jetson Thor芯片是该公司专门为机器人运用打造的高性能推理芯片,也是Jetson系列面向未来具身智能运用给出的硬件办理方案,高算力、高度集成和一体化方案是该平台的特点。

同时,英伟达还供应了丰富的软件资源,从最底层的SDK到操作系统层面都可以找到干系的资源,实现具身智能等机器人运用的快速开拓。

标签:

相关文章

IT技术,变革与创新的力量

随着科技的飞速发展,IT技术已经成为推动社会进步的重要力量。从互联网的普及到大数据、云计算、人工智能等新兴技术的崛起,IT技术不断...

互联网 2024-12-27 阅读0 评论0

TOSHIBA 东芝 HK4R 960GB SSD评测_企业级_东芝

很多朋友问购买路子,无法购买,这种企业级产品要不海淘,要不咸鱼,要不去直接和东芝签批量订单,但是高端货我们须要理解其高端在哪里,然...

互联网 2024-12-27 阅读0 评论0