吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

當AI遇上云原生,綠色算力助力開啟AI新時代

安晟培半導體 ? 來源:安晟培半導體 ? 2023-02-24 11:23 ? 次閱讀

撰寫文章、編寫代碼、譜寫 Rap,上知天文,下知地理,十八般武藝樣樣精通……從 2022 年底開始,一款由美國人工智能研究實驗室 OpenAI 發(fā)布的自然語言處理工具 ChatGPT 備受關注,成為現(xiàn)象級的 AI 產(chǎn)品,掀起全球的 AI 浪潮。

在以 ChatGPT 為代表的 AI 應用蓬勃發(fā)展的背后,離不開數(shù)據(jù)中心提供的算力支撐。而隨著相關應用的不斷發(fā)展,它們所需的算力將呈指數(shù)級增長,所需的能耗也不容小覷。根據(jù) 2021 年國外研究人員年發(fā)表的研究結(jié)果,部分基于 GPT-3 模型的訓練共消耗1,287 兆瓦時電力,并產(chǎn)生了超過550 噸二氧化碳當量的排放,這相當于一個人往返紐約和舊金山550 次所消耗的二氧化碳量[1]。

Ampere Computing 一直致力于為數(shù)據(jù)中心帶來高性能、高能效的云原生處理器,助力減少環(huán)境足跡,構建綠色數(shù)據(jù)中心,降低總體擁有成本(TCO),以更可持續(xù)的方式為用戶提供更多的綠色算力。在 AI 領域,Ampere 提供的 AI 解決方案具備卓越的推理性能和優(yōu)越的能效,幫助用戶輕松應對算力及能耗的挑戰(zhàn)。

想知道 ChatGPT 如何看待AI 在“減碳”方面的作用嗎?快來參與文末的趣味互動吧!

云原生設計,強力賦能 AI 推理

Ampere Altra Max 基于高性能、高能效及可預測的創(chuàng)新架構,非常適合在云中執(zhí)行 AI 推理工作,不僅可以滿足延遲和吞吐量的要求,而且性能優(yōu)于基于 x86 架構的 CPU。讓我們一起來看一下在 Ampere Altra Max 處理器上運行 AI 推理的收益吧!

開箱即用,暢享便捷體驗

在 Ampere Altra Max 上運行 AI 推理不需要修改或轉(zhuǎn)換已有神經(jīng)網(wǎng)絡,即可在 TensorFlow、PyTorch 或 ONNX 框架上開發(fā)和運行 AI 推理的工作負載。用戶可從 Ampere 或 Ampere 云服務合作伙伴處免費獲得優(yōu)化框架,高效地部署和運行應用程序。同時,Ampere Altra Max 是目前唯一支持 fp16 數(shù)據(jù)格式,并已廣泛可用的云原生處理器,將 fp32 訓練的網(wǎng)絡量化為 fp16 極為簡單,且不會導致明顯的精度損失。

此外,Ampere 還提供一系列不斷優(yōu)化、預訓練的模型,供用戶下載用于演示或在實際應用程序中進行調(diào)整并使用。并且,Ampere Altra Max CPU 還可與 NVIDIA GPU 協(xié)同工作,滿足用戶的訓練需求。

高度可擴展,有效抵抗干擾

憑借創(chuàng)新的可橫向擴展架構,Ampere Altra Max 處理器具有更高的核心數(shù)和出色的單線程性能。結(jié)合所有內(nèi)核可同時一致頻率運行的特性,Ampere Altra Max 的單 CPU 整體性能比目前最好的 x86 服務器更高、更穩(wěn)定,在多租戶的云環(huán)境中對“嘈雜鄰居”的干擾也更具抵抗力。

基準測試,彰顯卓越推理性能

為展示 Ampere Altra Max CPU 在多個具有代表性的 AI 推理任務中的卓越性能,Ampere 按照 MLCommons 指南運行了一系列基準測試(包括計算機視覺和 NLP 應用),部分測試的結(jié)果如下。

計算機視覺方面,使用 SSD ResNet-34 測試典型的對象檢測應用,在 fp32 模式下與比較對象相比,Ampere Altra Max 在低延遲方面最高可領先近 4 倍。在 fp16 模式下,Altra Max 將領先優(yōu)勢擴大了兩倍,同時保持了相同的精度。

52ae8e84-b371-11ed-bfe3-dac502259ad0.png

在性能功耗比方面,Ampere Altra Max 也具有顯著優(yōu)勢。在 fp16 分辨率下,Ampere Altra Max 的能效與比較對象相比高約 5 倍。而在 fp32 分辨率下,Ampere Altra Max 則擁有高約 2 倍的領先優(yōu)勢。

52d9a40c-b371-11ed-bfe3-dac502259ad0.png

面對蓬勃發(fā)展的 AI 應用,Ampere AI 解決方案將為 AI 應用和數(shù)據(jù)中心的發(fā)展提供更可持續(xù)的綠色算力支撐,助力解決不斷升級的算力需求和日益突出的環(huán)境問題。一直以來,Ampere 著眼未來、不斷創(chuàng)新,將卓越性能和能效融入到為云定制的解決方案中,助力釋放數(shù)字經(jīng)濟生產(chǎn)力,助推科技產(chǎn)業(yè)在可持續(xù)發(fā)展的道路上一路“狂飆”。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    31536

    瀏覽量

    270343
  • 人工智能
    +關注

    關注

    1796

    文章

    47683

    瀏覽量

    240302
  • 云原生
    +關注

    關注

    0

    文章

    252

    瀏覽量

    7986
  • 算力
    +關注

    關注

    1

    文章

    1016

    瀏覽量

    14959
  • ChatGPT
    +關注

    關注

    29

    文章

    1570

    瀏覽量

    8062

原文標題:創(chuàng)芯課堂|當 AI 遇上云原生,綠色算力助力開啟 AI 新時代

文章出處:【微信號:AmpereComputing,微信公眾號:安晟培半導體】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關推薦

    云原生AI服務怎么樣

    云原生AI服務,是指采用云原生的原則和技術來構建、部署和管理人工智能應用及工作負載的方法和模式。那么,云原生AI服務怎么樣呢?下面,
    的頭像 發(fā)表于 01-23 10:47 ?112次閱讀

    中國信通院栗蔚:云計算與AI加速融合,如何開啟時代新紀元?

    中國信通院栗蔚:云計算與AI加速融合,如何開啟時代新紀元?
    的頭像 發(fā)表于 01-17 18:48 ?543次閱讀
    中國信通院栗蔚:云計算與<b class='flag-5'>AI</b>加速融合,如何<b class='flag-5'>開啟</b>智<b class='flag-5'>算</b><b class='flag-5'>時代</b>新紀元?

    云原生LLMOps平臺作用

    云原生LLMOps平臺是一種基于云計算基礎設施和開發(fā)工具,專門用于構建、部署和管理大型語言模型(LLM)全生命周期的平臺。以下,是對云原生LLMOps平臺作用的梳理,由AI部落小編整理。
    的頭像 發(fā)表于 01-06 10:21 ?110次閱讀

    如何選擇云原生機器學習平臺

    當今,云原生機器學習平臺因其彈性擴展、高效部署、低成本運營等優(yōu)勢,逐漸成為企業(yè)構建和部署機器學習應用的首選。然而,市場上的云原生機器學習平臺種類繁多,功能各異,如何選擇云原生機器學習平臺呢?下面,
    的頭像 發(fā)表于 12-25 11:54 ?162次閱讀

    企業(yè)AI租賃模式的好處

    構建和維護一個高效、可擴展的AI基礎設施,不僅需要巨額的初期投資,還涉及復雜的運維管理和持續(xù)的技術升級。而AI
    的頭像 發(fā)表于 12-24 10:49 ?263次閱讀

    什么是云原生MLOps平臺

    云原生MLOps平臺,是指利用云計算的基礎設施和開發(fā)工具,來構建、部署和管理機器學習模型的全生命周期的平臺。以下,是對云原生MLOps平臺的介紹,由AI部落小編整理。
    的頭像 發(fā)表于 12-12 13:13 ?163次閱讀

    廣和通開啟端側(cè)AI新時代

    AI發(fā)展正酣,隨著終端芯片越來越高、端側(cè)模型能力越來越強、實時響應及隱私保護的端側(cè)應用需求增加,端側(cè)AI已然具備落地的條件。端側(cè)AI離客
    的頭像 發(fā)表于 12-12 10:35 ?309次閱讀

    企業(yè)AI租賃是什么

    企業(yè)AI租賃是指企業(yè)通過互聯(lián)網(wǎng)向?qū)I(yè)的提供商租用所需的計算資源,以滿足其AI應用的需求。
    的頭像 發(fā)表于 11-14 09:30 ?1152次閱讀

    AI時代的重要性及現(xiàn)狀:平衡發(fā)展與優(yōu)化配置的挑戰(zhàn)

    AI時代扮演著至關重要的角色。如果說數(shù)據(jù)是AI大模型的“燃料”,那么
    的頭像 發(fā)表于 11-04 11:45 ?588次閱讀

    一體架構創(chuàng)新助力國產(chǎn)大AI芯片騰飛

    在灣芯展SEMiBAY2024《AI芯片與高性能計算(HPC)應用論壇》上,億鑄科技高級副總裁徐芳發(fā)表了題為《存一體架構創(chuàng)新助力國產(chǎn)大
    的頭像 發(fā)表于 10-23 14:48 ?419次閱讀

    大模型時代需求

    現(xiàn)在AI已進入大模型時代,各企業(yè)都爭相部署大模型,但如何保證大模型的,以及相關的穩(wěn)定性和性能,是一個極為重要的問題,帶著這個極為重要的問題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04

    HDC2024華為發(fā)布鴻蒙原生智能:AI與OS深度融合,開啟全新的AI時代

    董事長余承東先生表示:全新的Harmony Intelligence鴻蒙原生智能,將開啟全新的AI時代! ? 軟硬芯云協(xié)同 鴻蒙原生智能深度
    的頭像 發(fā)表于 06-24 09:28 ?720次閱讀
    HDC2024華為發(fā)布鴻蒙<b class='flag-5'>原生</b>智能:<b class='flag-5'>AI</b>與OS深度融合,<b class='flag-5'>開啟</b>全新的<b class='flag-5'>AI</b><b class='flag-5'>時代</b>

    軟通動力亮相2024中國移動網(wǎng)絡大會,共繪網(wǎng)絡新藍圖

    4月28日至29日,以“網(wǎng)絡點亮AI新時代”為主題的2024中國移動網(wǎng)絡大會在蘇州隆重舉
    的頭像 發(fā)表于 05-06 10:20 ?544次閱讀
    軟通動力亮相2024中國移動<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡大會,共繪<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡新藍圖

    一圖看懂星河AI數(shù)據(jù)中心網(wǎng)絡,全面釋放AI時代

    華為中國合作伙伴大會 | 一圖看懂星河AI數(shù)據(jù)中心網(wǎng)絡,以網(wǎng)強,全面釋放AI時代
    的頭像 發(fā)表于 03-22 10:28 ?834次閱讀
    一圖看懂星河<b class='flag-5'>AI</b>數(shù)據(jù)中心網(wǎng)絡,全面釋放<b class='flag-5'>AI</b><b class='flag-5'>時代</b><b class='flag-5'>算</b><b class='flag-5'>力</b>

    云原生是大模型“降本增效”的解藥嗎?

    云原生AI正當時
    的頭像 發(fā)表于 02-20 09:31 ?436次閱讀
    大发888娱乐城 df888ylc3403| 真人百家乐娱乐场开户注册| 乐天堂百家乐官网娱乐平台| 米易县| 天津水果机定位器| 百家乐现金投注信誉平台| 香港百家乐官网玩| 澳门百家乐官网鸿福厅| 大发888好么| 百家乐官网水晶筹码价格| 百家乐官网赌场老千| 天健棋牌大厅下载| 澳门百家乐论坛及玩法| 百家乐投注窍门| 防伪百家乐官网筹码币套装| 百家乐官网开闲几率| 方山县| 金豪娱乐| 皇冠现金网骗钱| 百家乐如何赚洗码| 可以玩百家乐的博彩网站| 三国百家乐官网娱乐城| 百家乐官网5式直缆投注法| 芜湖市| 天博国际娱乐城| 大发888客户端官方下载| 百家乐平7s88| 百家乐有几种玩法| 都坊百家乐官网的玩法技巧和规则| 百家乐官网干洗店| 平谷区| 壹贰博网| bet365体育在线注册| 大发888国际娱乐net| 摩纳哥百家乐的玩法技巧和规则 | 百家乐遥控牌靴| 百家乐官网游戏的玩法| 德州扑克外挂| 大发888娱乐城电脑版下载| 威尼斯人娱乐城代理开户| 多伦多百家乐的玩法技巧和规则|