吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

NVIDIA RAPIDS cuDF如何賦能AI加速數據科學

NVIDIA英偉達企業解決方案 ? 來源:NVIDIA英偉達企業解決方案 ? 2025-01-24 09:26 ? 次閱讀

隨著 AI 正幫助各行各業推動創新和提高效率,基于海量的高質量數據來訓練各種模型是充分發揮 AI 應用潛力的必經之路,正因如此,數據科學家們面臨著日益增長的工作負載需求,迫切需求尋找高效趁手的工具以應對挑戰。

Pandas 是一個靈活而強大的 Python 數據分析和處理庫,由于其是一款非常易于使用的 API,成為了數據科學家的首選。然而,隨著數據集大小的增長,Pandas 在純 CPU 系統中的處理速度和效率方面就會遇到困難。

對于面向數據分析工作的 DataFrame 軟件庫,除了 Pandas,目前還有一顆冉冉上升的開源新星——Polars。相比于主要依賴單線程執行的 Pandas,Polars 在處理大數據集時的速度通常比其快 5 到 10 倍。

盡管 Pandas 和 Polars 在數據處理領域各有所長,但是處理超大數據集不僅需要極致發揮 CPU 的能力,也需要 GPU 發揮作用。在這一背景下,NVIDIA 發布了 RAPIDS cuDF 庫,用于加載、連接、聚合、過濾和以其他方式操作數據,充分利用了 GPU 大規模并行處理能力的優勢。

RAPIDS 是一套開源的 GPU 加速 Python 程序庫,旨在改進數據科學和分析工作流。RAPIDS cuDF 是一個 GPU DataFrame 程序庫,其提供了一個類似 Pandas 的 API,用于加載、過濾和操作數據。cuDF 的早期版本只適用于 GPU 開發工作流程。而 NVIDIA 也在持續對這一應用進行更新。

現在 RAPIDS cuDF 可以為 950 萬 Pandas 用戶帶來 GPU 加速,而無需他們更改代碼,根據數據集大小為 5 GB 的分析基準測試結果,處理時間縮短到原來的 1/150。而由 RAPIDS cuDF 驅動的全新 GPU 引擎已經可將 NVIDIA GPU 上的 Polars 工作流速度最高提速 13 倍,這意味著僅在一臺機器上數據科學家就能實現在數秒內處理數億行數據。

借助 RAPIDS cuDF,數據科學家現在可以在他們首選的代碼庫上全速運行數據處理。此外,隨著數據集規模不斷增長,處理工作占用更多內存,在 NVIDIA RTX 加持的 AI 工作站和 PC 上的運行也實現了顯著的速度提升。相比于基于傳統 CPU 的解決方案,在工作站中配合使用 cuDF 和 NVIDIA RTX 5880 Ada 架構 GPU,可以將性能提升多達 100 倍。

通過以下博客了解更多關于 RAPIDS cuDF 的最新信息,解鎖在 AI 應用與解決方案中加速數據分析探索的創新靈感。

無需更改代碼即可將 Pandas 提速近 150 倍

Pandas 是 Python 生態系統中最流行的 DataFrame 程序庫,但它的速度會隨著 CPU 上數據量的增加而變慢。現在只需一條命令,用戶就可以在無需更改代碼的情況下,使用 cuDF 將加速計算引入到其 Pandas 工作流中。根據數據集大小為 5 GB 的分析基準測試結果,處理時間縮短到原來的 150 分之一。

點擊閱讀《無需更改代碼,RAPIDS cuDF 將 Pandas 提速近 150 倍》了解更多 cuDF 將統一的 CPU/GPU 體驗引入 Pandas 工作流并為其帶來頂尖性能的詳細信息。

RAPIDS cuDF 驅動的 Polars GPU 引擎

最高提速 13 倍

RAPIDS cuDF 驅動的 Polars GPU 引擎現已發布公測版,為各行各業的數據科學家和工程師提供了一種適用于中等規模數據處理的強大工具。該引擎最高能夠將 NVIDIA GPU 上的 Polars 工作流速度提速 13 倍,可以在不產生分布式系統開銷的情況下,高效處理數億行規模的數據集。Polars GPU 引擎直接內置在 Polars API 中,使所有用戶都能輕松訪問。

點擊閱讀《RAPIDS cuDF 驅動的 Polars GPU 引擎發布公測版》了解更多將 NVIDIA 加速計算引入 Polars 顯著提升加速性能的詳細介紹。

使用 RAPIDS cuDF 加速預處理工作流

突破數據科學的瓶頸

隨著 AI 和數據科學的不斷發展,快速處理和分析大量數據集的能力將成為各行業實現突破的關鍵差異化因素。無論是開發復雜的機器學習模型、執行復雜的統計分析還是探索生成式 AI,RAPIDS cuDF 都可為新一代數據處理奠定基礎。

點擊閱讀《解密 AI 如何加速數據科學工作流》了解更多相關信息,預見 RTX AI 將如何為未來的工程師創造無限可能。

GTC 2025 將于2025 年 3 月 17 至 21 日在美國加州圣何塞及線上同步舉行。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • NVIDIA
    +關注

    關注

    14

    文章

    5076

    瀏覽量

    103712
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4770

    瀏覽量

    129348
  • AI
    AI
    +關注

    關注

    87

    文章

    31501

    瀏覽量

    270301
  • 數據科學
    +關注

    關注

    0

    文章

    166

    瀏覽量

    10101

原文標題:合集詳解 RAPIDS cuDF 如何賦能 AI 加速數據科學

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    借助NVIDIA AI Foundry平臺推動醫療健康與生命科學行業發展

    借助 NVIDIA AI Foundry,全球領先的臨床研究與商業服務提供商 IQVIA 將為其全球生命科學領域的客戶提供 AI 智能體,助力加速
    的頭像 發表于 01-17 09:59 ?139次閱讀

    NVIDIA加速計算引入Polars

    Polars 近日發布了一款由 RAPIDS cuDF 驅動的全新 GPU 引擎,該引擎可將 NVIDIA GPU 上的 Polars 工作流速度最高提速 13 倍,使數據
    的頭像 發表于 11-20 10:03 ?299次閱讀
    將<b class='flag-5'>NVIDIA</b><b class='flag-5'>加速</b>計算引入Polars

    RAPIDS cuDF將pandas提速近150倍

    NVIDIA GTC 2024 上,NVIDIA 宣布,RAPIDS cuDF 當前已能夠為 950 萬 pandas 用戶帶來 GPU 加速
    的頭像 發表于 11-20 09:52 ?294次閱讀
    <b class='flag-5'>RAPIDS</b> <b class='flag-5'>cuDF</b>將pandas提速近150倍

    使用NVIDIA RAPIDS cuDF加速預處理工作流

    AI 正幫助各行各業推動創新和提高效率,但要充分發揮其潛力,必須基于海量的高質量數據對各種模型進行訓練。數據科學家在準備這類數據方面發揮著關
    的頭像 發表于 11-19 15:58 ?273次閱讀
    使用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>RAPIDS</b> <b class='flag-5'>cuDF</b><b class='flag-5'>加速</b>預處理工作流

    NVIDIA加速AI在日本各行各業的應用

    企業借助基于 NVIDIA AI Enterprise 與 Omniverse 工業 AI 構建的創新中心和服務加速 AI 轉型。
    的頭像 發表于 11-19 15:45 ?305次閱讀

    日本企業借助NVIDIA產品加速AI創新

    日本領先企業和大學正在使用 NVIDIA NeMo、NIM 微服務和 NVIDIA Isaac 加速 AI 創新。
    的頭像 發表于 11-19 14:34 ?403次閱讀

    華為云徐峰:AI 應用現代化,加速軟件生產力躍升

    2024 年 9 月 19 日,在華為全聯接大會 2024 的“AI 應用現代化,加速軟件生產力躍升”論壇上,華為云 PaaS 服務產品部部長徐峰發表了主題演講,介紹了未來應用智能
    的頭像 發表于 10-14 09:45 ?563次閱讀
    華為云徐峰:<b class='flag-5'>AI</b> <b class='flag-5'>賦</b><b class='flag-5'>能</b>應用現代化,<b class='flag-5'>加速</b>軟件生產力躍升

    AI for Science:人工智能驅動科學創新》第4章-AI與生命科學讀后感

    高效地篩選出具有潛力的藥物候選分子,加速新藥上市的進程。在基因測序與編輯領域,AI技術將提高基因數據的處理速度和準確性,為個性化醫療和精準醫療提供有力支持。此外,AI技術還將推動生命
    發表于 10-14 09:21

    NVIDIA理想汽車共同推進智能駕駛和智能座艙技術創新

    智能化已成為汽車行業發展的新引擎,NVIDIA 正在理想汽車共同推進智能駕駛和智能座艙技術創新。 ? 作為中國新能源汽車制造商和造車新勢力頭部企業之一,理想汽車深耕智能駕駛領域。通過利用
    的頭像 發表于 07-01 18:21 ?1804次閱讀

    HPE 攜手 NVIDIA 推出 NVIDIA AI Computing by HPE,加速生成式 AI 變革

    by HPE 包含了可持續的加速計算產品組合以及全生命周期服務,將簡化 AI 創造價值的過程,加速生成式 AI 的發展步伐。 NVIDIA
    的頭像 發表于 06-21 14:39 ?420次閱讀

    NVIDIA推出NVIDIA AI Computing by HPE加速生成式 AI 變革

    作為極具開創性的一站式“交鑰匙”私有云人工智能(private-cloud AI)解決方案,NVIDIA AI Computing by HPE 包含了可持續的加速計算產品組合以及全生
    的頭像 發表于 06-20 17:36 ?782次閱讀

    NVIDIA 通過 Holoscan 為 NVIDIA IGX 提供企業軟件支持,實現邊緣實時醫療、工業和科學 AI 應用

    美敦力、SETI協會以及領先的制造商正在構建? NVIDIA IGX 系統, 為 ?AI 在工業邊緣 ? ? COMPUTEX — 2024 年 6 月 2 日 —
    發表于 06-03 09:48 ?338次閱讀
      <b class='flag-5'>NVIDIA</b> 通過 Holoscan 為 <b class='flag-5'>NVIDIA</b> IGX 提供企業軟件支持,實現邊緣實時醫療、工業和<b class='flag-5'>科學</b> <b class='flag-5'>AI</b> 應用

    助力科學發展,NVIDIA AI加速HPC研究

    科學家和研究人員正在利用 NVIDIA 技術將生成式 AI 應用于代碼生成、天氣預報、遺傳學和材料科學領域的 HPC 工作。
    的頭像 發表于 05-14 09:17 ?463次閱讀
    助力<b class='flag-5'>科學</b>發展,<b class='flag-5'>NVIDIA</b> <b class='flag-5'>AI</b><b class='flag-5'>加速</b>HPC研究

    利用NVIDIA AI Enterprise IGX在邊緣任務關鍵型AI

    NVIDIA SDK 在加速智慧城市、醫療和機器人等領域的 AI 應用方面發揮了重要作用。
    的頭像 發表于 04-26 09:46 ?551次閱讀
    利用<b class='flag-5'>NVIDIA</b> <b class='flag-5'>AI</b> Enterprise IGX在邊緣<b class='flag-5'>賦</b><b class='flag-5'>能</b>任務關鍵型<b class='flag-5'>AI</b>

    使用NVIDIA Triton推理服務器來加速AI預測

    這家云計算巨頭的計算機視覺和數據科學服務使用 NVIDIA Triton 推理服務器來加速 AI 預測。
    的頭像 發表于 02-29 14:04 ?632次閱讀
    百家乐官网微笑玩| k7娱乐城| 百家乐官网游戏筹码| 明升娱乐| ea百家乐打水| 游戏机百家乐官网的技术 | 百家乐官网翻牌规则| 88娱乐城官网| 百家乐赌场策略| 里尼的百家乐官网策略| 凯旋门娱乐城开户| 赌场百家乐试玩| 百家乐官网singapore| 沈阳娱网棋牌官方下载| 百家乐游戏下裁| 安桌百家乐官网游戏百家乐官网| 丹东亿酷棋牌下载| 百家乐视频游戏官网| 澳门百家乐官网的公式| 六合彩网址大全| 百家乐娱乐平台备用网址| 红树林百家乐官网的玩法技巧和规则 | e世博百家乐攻略| 香港六合彩85期开奖结果| 百家乐赌博程序| 百家乐官网方案| 在线真钱游戏| 威尼斯人娱乐城官方| 百家乐的连庄连闲| 百家乐官网双龙出海注码法| 澳门百家乐| 威尼斯人娱乐城最新地址| 百家乐规则好学吗| 游戏机百家乐官网庄闲| 霍山县| 大发888娱乐场下载yguard| 百家乐娱乐送白菜| 百家乐官网技巧技巧| 百家乐官网庄闲筹码| 临城县| 十三张娱乐城开户|