吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

基于英偉達Jetson Thor芯片,如何快速實現具身智能方案創新?

Felix分析 ? 來源:電子發燒友 ? 作者:吳子鵬 ? 2024-04-17 00:08 ? 次閱讀

電子發燒友網報道(文/吳子鵬)近一段時間,在各種人工智能相關的大會上,具身智能已經成為共同的話題,并且有很多人將2024年定義為具身智能產業發展元年,因為此前都是概念性探索,今年則是開始切實地需求落地。

根據中國計算機學會的定義,具身智能橫跨人工智能、機器人學習、計算機視覺等學科,屬于有物理身體的智能體通過與物理環境進行交互,從而獲得智能的人工智能研究范式。那么,如果工程師想要搭建自己的具身智能創新方案,該如何做呢?

那么,在這里我們向大家推薦英偉達的Jetson Thor芯片方案以及相關的配套資源。

專門為機器人應用打造的Jetson Thor

1950年圖靈首次提出具身智能概念,但在那之后具身智能并沒有取得很大進展,很重要的原因就是基于當時的軟硬件資源,具身智能簡直就是天方夜譚。在ITF World 2023半導體大會上,英偉達創始人兼首席執行官黃仁勛重提具身智能,他認為人工智能下一個浪潮將是具身智能”。

在GTC 2024上,英偉達發布了專為人形機器人打造的Jetson Thor芯片平臺,這款芯片融入了非常多的英偉達關于具身智能發展的“know how”。在Jetson Thor發布之前,英偉達在機器人領域已經發布了多款芯片方案,包括Jetson Orin、Jetson Orin Nano和Jetson AGX Xavier等。

wKgZomYeTpiAOBZZAAIpLyiDcFY514.png
Jetson硬件路線圖,圖源:英偉達


并且,正如英偉達所言,每一款Jetson系列產品都是一個完整的系統模組 (SOM),其中包括 GPUCPU、內存、電源管理和高速接口等。以Jetson Orin模組為例,最高可提供高達每秒 275萬億次浮點運算 (TOPS)的算力,擁有4GB到64GB內存配置,模組功耗在7瓦到60瓦之間。

Jetson Thor延續了Jetson系列高性能的傳統,可提供每秒800萬億次8位浮點運算AI性能,并集成功能安全處理器、高性能CPU集群和100GB以太網帶寬。正如筆者此前文章提到的,Jetson Thor基于英偉達Blackwell架構,保證了該芯片的高性能。和英偉達上一代Hopper架構相比,Blackwell架構在各項性能方面都帶來了數倍的提升。并且,Blackwell Tensor核心增加了新的精度,基于該架構打造的第二代Transformer引擎支持4位浮點數AI推理,計算能力和模型規模提高一倍。

根據英偉達的介紹,Jetson Thor能夠執行復雜的任務并安全、自然地與人和機器交互,具有針對性能、功耗和尺寸優化的模塊化架構。

圍繞Jetson系列豐富的開發資源

如上所述,英偉達Jetson系列是面向機器人開發的解決方案,滿足各種應用的性能和預算需求。在這套方案中,除了高性能、高度集成的芯片平臺,還有豐富的配套資源。

比如,面向產品開發的開發者,Jetson系列整合JetPack SDK、Metropolis微服務、生產就緒的Isaac ROS軟件包和特定于應用程序的參考AI工作流程。

JetPack SDK是Jetson軟件堆棧的源頭,提供Jetson Linux、開發人員工具、CUDA-X加速庫和其他NVIDIA技術。JetPack SDK構建了用于各種機器人應用的底層能力,借助JetPack SDK,開發者可以使用TensorRT和cuDNN用于加速AI推理,CUDA用于加速通用計算,VPI用于加速計算機視覺和圖像處理,Jetson Linux API用于加速多媒體,libArgus和V4l2用于加速相機處理。

同時,借助Jetson Linux,開發人員可以開發各種應用程序,工具包中包含Linux內核、引導加載器、NVIDIA驅動程序、閃爍實用程序、示例文件系統和Jetson平臺的工具鏈,使得應用程序開發非常迅捷。總結來說,在JetPack SDK中,擁有非常豐富的細分功能的SDK,工程師朋友可以根據自己的需要去選擇。

我們再看一下Isaac ROS軟件包,它是一個用于機器人操作系統的軟硬件加速包,包括多個開源選項。Isaac ROS提供具有圖像處理和計算機視覺功能的單個軟件包(GEM)和完整管道(NITROS),幫助機器人應用構建高吞吐量的感知系統;模塊化軟件包的Isaac ROS讓開發人員可以根據自己的需要來替換部分算法;Isaac ROS擁有非常出色的兼容性,能夠大幅縮短機器人方案的開發周期。總之,Isaac ROS是一個功能豐富且模塊化的感知軟件包,為機器人應用程序帶來高性能感知和硬件加速。

面向教育工作者、學生和發燒友,英偉達也提供Jetson Nano開發者套件,能夠幫助這類型的開發者進行教授、學習和開發AI與機器人融合的方案。

除了豐富的配套開發資源,我們還要重提英偉達在具身智能大模型方面的先進理念,英偉達Project GR00T人形機器人基礎模型是一個VLA類型的模型,具備語言、動作和專業機器人知識模態,是未來具身智能開發的主流模型路線。這些知識和資源,開發者都可以從英偉達GR00T項目或者 Isaac工具組合中去獲取。

結語

英偉達Jetson Thor芯片是該公司專門為機器人應用打造的高性能推理芯片,也是Jetson系列面向未來具身智能應用給出的硬件解決方案,高算力、高度集成和一體化方案是該平臺的特點。

同時,英偉達還提供了豐富的軟件資源,從最底層的SDK到操作系統層面都可以找到相關的資源,實現具身智能等機器人應用的快速開發。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    211

    文章

    28640

    瀏覽量

    208395
  • 英偉達
    +關注

    關注

    22

    文章

    3847

    瀏覽量

    91964
  • 人形機器人
    +關注

    關注

    3

    文章

    496

    瀏覽量

    16799
  • 具身智能
    +關注

    關注

    0

    文章

    55

    瀏覽量

    100
收藏 人收藏

    評論

    相關推薦

    “端到端”智駕芯片英偉DRIVE Thor接棒,車企自研芯片對標行業領先

    。 ? 在智駕芯片層面,不少廠商采用了英偉的DRIVE Orin芯片,以及下一代智能駕駛計算平臺Tho
    的頭像 發表于 12-09 09:05 ?1654次閱讀

    英偉高管到訪智能機器人創新中心

    近日,英偉機器人技術業務領域的重量級人物——副總裁Deepu Talla,攜其團隊到訪了國家與地方共同建設的智能機器人
    的頭像 發表于 01-23 10:30 ?342次閱讀

    英偉副總裁到訪智能機器人創新中心

    近日,英偉機器人技術業務領域的重量級人物——副總裁Deepu Talla一行,專程到訪了國家與地方共建的智能機器人
    的頭像 發表于 01-22 10:40 ?346次閱讀

    【「智能機器人系統」閱讀體驗】2.智能機器人的基礎模塊

    目前高速發展的大模型能給智能帶來一些突破性的進展。 對于感知系統,要做的主要任務是物體檢測,語義分割,立體視覺,鳥瞰視角感知。 有很多算法都可以實現物體檢測,比如文章提到的HOG
    發表于 01-04 19:22

    【「智能機器人系統」閱讀體驗】1.初步理解智能

    的研發工作奠定了基礎。繼之而來,北京理工大學在2002年發布的“匯童”系列機器人,實現了無外接電纜的行走。 三、問題與挑戰 智能雖然取得了一定的進展,但是也面臨著諸多的問題與挑戰,
    發表于 12-28 21:12

    智能機器人系統》第7-9章閱讀心得之智能機器人與大模型

    研讀《智能機器人系統》第7-9章,我被書中對大模型與機器人技術融合的深入分析所吸引。第7章詳細闡述了ChatGPT for Robotics的核心技術創新:它摒棄了傳統的分層控制架
    發表于 12-24 15:03

    【「智能機器人系統」閱讀體驗】+初品的體驗

    快速發展,相關人才的需求也在不斷增加,通過閱讀該書可以幫助大家系統性地了解和分析當前智能機器人系統的發展現狀和前沿研究,為未來的研究和開發工作提供指導。此外,本書還可以為研究人員
    發表于 12-20 19:17

    智能機器人系統》第1-6章閱讀心得之智能機器人系統背景知識與基礎模塊

    ,互聯網行業占成熟經濟體的GDP增長的21%,世界經濟正面向數字經濟轉型的大趨勢。智能機器人集成人工智能、高端制造、新材料等技術,其核心在于通過
    發表于 12-19 22:26

    什么是智能?自動駕駛是智能嗎?

    技術發展日新月異,越來越多新概念、新名詞、新說法被提出,就在最近,“智能”的概念在圈內十分火熱,更有人將自動駕駛比作為
    的頭像 發表于 12-10 11:02 ?329次閱讀

    智能與機器學習的關系

    智能(Embodied Intelligence)和機器學習(Machine Learning)是人工智能領域的兩個重要概念,它們之間存在著密切的關系。 1.
    的頭像 發表于 10-27 10:33 ?500次閱讀

    智能的核心概念解析

    1. 性(Embodiment) 性是智能
    的頭像 發表于 10-27 09:52 ?773次閱讀

    智能在機器人技術中的發展

    通過與其物理環境進行交互來學習和適應的能力。這種智能不僅僅依賴于算法和數據處理,而是通過實體的感知、運動和環境交互來實現智能行為。
    的頭像 發表于 10-27 09:48 ?865次閱讀

    廣和通榮登36氪智能創新應用案例及《2024年智能產業發展研究報告》

    面向智能應用行業趨勢,36氪重磅啟動「AI Partner·2024智能
    的頭像 發表于 10-10 10:52 ?894次閱讀
    廣和通榮登36氪<b class='flag-5'>具</b><b class='flag-5'>身</b><b class='flag-5'>智能</b><b class='flag-5'>創新</b>應用案例及《2024年<b class='flag-5'>具</b><b class='flag-5'>身</b><b class='flag-5'>智能</b>產業發展研究報告》

    廣和通榮登36氪智能創新應用案例及2024年智能產業發展研究報告

    面向智能應用行業趨勢,36氪重磅啟動「AI Partner·2024智能
    的頭像 發表于 10-10 10:51 ?373次閱讀
    廣和通榮登36氪<b class='flag-5'>具</b><b class='flag-5'>身</b><b class='flag-5'>智能</b><b class='flag-5'>創新</b>應用案例及2024年<b class='flag-5'>具</b><b class='flag-5'>身</b><b class='flag-5'>智能</b>產業發展研究報告

    進一步解讀英偉 Blackwell 架構、NVlink及GB200 超級芯片

    新的標準。Blackwell架構和GB200 超級芯片有望推動英偉在人工智能領域更進一步,鞏固其在高性能計算和人工智能技術領域的領先地位。
    發表于 05-13 17:16
    百家乐娱乐网站| 百家乐怎样赢| 百家乐官网真人游戏娱乐| 太阳城娱乐城去大丰收娱乐| 太阳百家乐代理| 澳门百家乐常赢打法| 百家乐赢法口诀| 百家乐官网筹码14克| 百家乐官网规律打法| 娱乐城百家乐官网送白菜| 百家乐官网真钱游戏下载| 仁寿县| 大发888投注大发娱乐| 百家乐下注法| 百家乐玩法| 威尼斯人娱乐场wnsrdcylcbywz| 太原百家乐的玩法技巧和规则| 澳门赌百家乐能赢钱吗| 百家乐资金注码| 大玩家百家乐现金网| 真钱百家乐游戏排行| 百家乐最好的平台是哪个| 赌场百家乐欺诈方法| 百家乐分析软件骗人| 百家乐色子玩法| 百家乐分析概率原件| 百家乐长庄投注| 老钱庄百家乐的玩法技巧和规则| 宝马百家乐的玩法技巧和规则 | 百家乐官网娱乐城博彩通博彩网| 百家乐官网博百家乐官网的玩法技巧和规则| 万宝路百家乐官网的玩法技巧和规则| 竞咪百家乐官网的玩法技巧和规则| 百家乐官网比较好的网站| 金博士百家乐官网娱乐城 | 凯旋国际| 致胜百家乐的玩法技巧和规则 | 星空棋牌官方下载| 思茅市| 缅甸百家乐官网网络赌博解谜| 菲彩百家乐官网的玩法技巧和规则|