吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

算力呈指數(shù)級增長,服務(wù)器有哪些進展?

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶 ? 2023-05-17 09:07 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/黃晶晶)人工智能的基座包括數(shù)據(jù)、算力和算法。其中算力更是數(shù)據(jù)和算法的支撐。各類模型基于數(shù)據(jù)量、算法的訓(xùn)練和推理推動了算力需求。

根據(jù)OpenAI的測算數(shù)據(jù),AI訓(xùn)練運行所使用的算力每3-4個月增長一倍。AI訓(xùn)練運行所使用的算力已增長超30萬倍。IDC數(shù)據(jù)顯示,2022年我國智能算力規(guī)模達(dá)到268百億億次/秒(EFLOPS),超過通用算力規(guī)模;預(yù)計未來5年我國智能算力規(guī)模的年復(fù)合增長率將達(dá)52.3%。

構(gòu)筑算力必然離不開服務(wù)器的建設(shè)。作為全球頂級的人工智能/高性能計算服務(wù)器制造商和解決方案提供商,Supermicro公司日前向電子發(fā)燒友網(wǎng)表示,新業(yè)務(wù)合約有很大一部分來自人工智能/高性能計算領(lǐng)域,而且許多與ChatGPT有關(guān)。

Supermicro高管表示,人工智能界并不知道未來還會遇到多少計算密集型問題。以GPT-3為例,它需要323 Zetta FLOPS的算力和1750億個參數(shù)來訓(xùn)練模型,更需要龐大的算力來執(zhí)行推理工作。更加智能的GPT-4將會有更多的參數(shù),有可能達(dá)到一萬億甚至更多。

為了運轉(zhuǎn)這樣的大模型和大規(guī)模參數(shù),如何有效運用服務(wù)器顯得十分重要,這關(guān)乎服務(wù)器的性價比選擇。Supermicro公司高管說到,當(dāng)大量的GPU服務(wù)器集群起來時,人工智能/高性能計算應(yīng)用的每一微秒都很重要。Supermicro設(shè)計開發(fā)了各種不同架構(gòu)的GPU服務(wù)器,提升了CPU和GPU之間或從GPU到GPU的數(shù)據(jù)傳輸速度。通過合理選擇系統(tǒng)SKU,解決方案的設(shè)計可以將每個CPU/GPU核心利用到極致。從邊緣到云,從訓(xùn)練到推理,當(dāng)前市面上所需的人工智能/高性能計算應(yīng)用,Supermicro都可以提供全方位的GPU服務(wù)器,能讓客戶充分利用計算資源上花費的每一分錢。

更大的服務(wù)器存儲空間


隨著CPU、GPU和內(nèi)存技術(shù)的發(fā)展,現(xiàn)代計算集群處理數(shù)據(jù)的速度和數(shù)量不斷增加,因此有必要增強存儲性能,以便將數(shù)據(jù)饋送給應(yīng)用時不會形成減緩整個系統(tǒng)的速度的瓶頸。

最近,Supermicro推出了超高性能、高密度PB級All-Flash NVMe服務(wù)器新機型。更新產(chǎn)品系列中初步推出的產(chǎn)品將在1U 16槽機架式安裝系統(tǒng)中支持高達(dá)1/2 PB的儲存空間,隨后的產(chǎn)品則將在2U 32槽機架式安裝系統(tǒng)中為IntelAMD PCIe Gen5平臺提供1 PB儲存空間。

Supermicro高管表示,Supermicro的Petascale All-Flash服務(wù)器提供業(yè)界領(lǐng)先的存儲性能和容量,可以減少滿足熱存儲和溫存儲要求所需的機架式系統(tǒng)數(shù)量,并通過諸多功能特點降低總體擁有成本。

具體來說,容量擴展,更廣泛的PCB有助于實現(xiàn)更靈活的NAND芯片布局;性能擴展,可擴展連接器設(shè)計,多鏈路寬度(x4、x8、x16),支持不同電源配置;熱效率,散熱和制冷管理改進;面向未來,通用連接器適用于各種尺寸規(guī)格,可以為未來幾代PCIe提供更加強大的信號完整性;解決方案范圍,各種功率配置(20W-70W),適用于更高容量/性能的固態(tài)硬盤。

“安裝了速度更快的固態(tài)硬盤之后,系統(tǒng)的平衡就變得更加重要。Supermicro擁有全新的NUMA平衡對稱架構(gòu),可以提供到驅(qū)動器的最短信號路徑、到存儲器的帶寬平衡和靈活的網(wǎng)絡(luò)選項,從而降低時延。最重要的是,對稱設(shè)計還有助于確保整個系統(tǒng)的氣流暢通無阻,因此可以使用更加強大的處理器。”Supermicro高管說道。

桌面型GPU兼顧AI與液冷散熱

CPU/GUP/xPU也構(gòu)成了系統(tǒng)設(shè)計的熱量挑戰(zhàn),各種處理器消耗的功率不斷攀升,另一方面,科研/醫(yī)療設(shè)施/金融/石油和天然氣企業(yè)需要人工智能/高性能計算來提高其專業(yè)競爭力。在這些企業(yè)中,有很多需要在員工工作的地點設(shè)置工作站或本地服務(wù)器。

基于這樣的需求,Supermicro推出功能強大、安靜且節(jié)能的NVIDIA加速人工智能(AI)開發(fā)平臺系列當(dāng)中的首款裝置。全新的AI開發(fā)平臺SYS-751GE-TNRT-NV1是一款應(yīng)用優(yōu)化的系統(tǒng),在開發(fā)及運行AI軟件時表現(xiàn)尤其出色。此外,這個性能強大的系統(tǒng)可以支持小團隊里的用戶同步運行訓(xùn)練、推理和分析等工作負(fù)載。

獨立的液冷功能可滿足四個NVIDIA? A100 Tensor Core GPU和兩個第4代Intel Xeon可擴展處理器的散熱需求,在發(fā)揮完整性能的同時提高整體系統(tǒng)效率,并實現(xiàn)了在辦公環(huán)境下的安靜(約30dB)運行。

對于散熱的考量,Supermicro高管認(rèn)為搭載NVIDIA A800等強大的協(xié)加速器、且聲壓級介于30~45分貝的工作站,必須采用液冷解決方案才能滿足這一需求。冷板式液冷在市場上經(jīng)過了十多年的考驗,目前其成熟度和可靠性已經(jīng)達(dá)到了數(shù)據(jù)中心大規(guī)模部署的水平。

創(chuàng)新技術(shù)驅(qū)動成長

早前,Supermicro就提出了觀察到的七大創(chuàng)新技術(shù),他們包括高性能350W CPU和700W GPU、處理速度更快的DDR5內(nèi)存、第五代PCI-E 5.0技術(shù)、Compute Express Link(CXL,開放式互聯(lián)標(biāo)準(zhǔn))、400G高速網(wǎng)絡(luò)、新型固態(tài)硬盤和液冷技術(shù)。

簡言之就是更高的功耗和更快的數(shù)據(jù)傳輸速度。這就需要優(yōu)化功率效率、解決熱量挑戰(zhàn)、加強第五代PCIe、DDR5、高速網(wǎng)絡(luò)、無阻塞系統(tǒng)架構(gòu)設(shè)計和部署等。

Supermicro高管指出,這些創(chuàng)新技術(shù)背后的一個共同點是熱量調(diào)度。更快的處理器頻率、更多的計算核心、更高速的網(wǎng)絡(luò)都會產(chǎn)生更多的熱量,這些熱量必須輸送到數(shù)據(jù)中心之外。他表示,正如我們預(yù)計的技術(shù)趨勢和產(chǎn)品路線圖所示,當(dāng)前和新一代人工智能/高性能計算服務(wù)器采用的熱量解決方案必須比目前的空氣冷卻更加高效。

展望已經(jīng)到來的AI爆發(fā)的時代,ChatGPT的需求日益增長,不僅推高了服務(wù)器的銷量,而且還推動新技術(shù)通過大規(guī)模部署而被普遍接納的機會。GPT提供的服務(wù)包括語言翻譯、聊天機器人、內(nèi)容生成、語言分析、語音輔助等等。

要實現(xiàn)人工智能系統(tǒng)的所有關(guān)鍵技術(shù),就需要足夠快速的服務(wù)器,并通過復(fù)雜的架構(gòu)、用于維護工作的液冷管布置等將其聯(lián)網(wǎng)。這些專業(yè)技術(shù)知識意味著解決方案將不再作為一個個的服務(wù)器提供。完整的解決方案部署更像是一個具有機架級就緒水平的即插即用解決方案。

Supermicro將ChatGPT視為服務(wù)器市場增長的關(guān)鍵驅(qū)動力,未來我們會看到GPT服務(wù)的更多創(chuàng)新型用例。Supermicro已準(zhǔn)備好面對這個趨勢,始終保持在AI服務(wù)器技術(shù)前沿,并提供創(chuàng)新的解決方案,使得客戶能夠加速他們的AI應(yīng)用規(guī)劃,同時優(yōu)化總體擁有成本并通過綠色計算最大限度地減少對環(huán)境的影響。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    9303

    瀏覽量

    86059
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    31513

    瀏覽量

    270309
  • Supermicro
    +關(guān)注

    關(guān)注

    0

    文章

    31

    瀏覽量

    9347
收藏 人收藏

    評論

    相關(guān)推薦

    華為云征文 云計算新紀(jì)元:Flexus 云服務(wù)器 X 實例引領(lǐng)柔性時代,部署 Zabbix 運維監(jiān)控

    Flexus 云服務(wù)器 X 實例引領(lǐng)柔性時代 引言 隨著云計算技術(shù)的飛速發(fā)展,企業(yè)對于的需求日益多樣化與精細(xì)化。傳統(tǒng)的粗顆粒度彈性
    的頭像 發(fā)表于 01-02 11:57 ?98次閱讀
    華為云征文 云計算新紀(jì)元:Flexus 云<b class='flag-5'>服務(wù)器</b> X 實例引領(lǐng)柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>時代,部署 Zabbix 運維監(jiān)控

    基礎(chǔ)篇:從零開始了解

    即計算能力(Computing Power),狹義上指對數(shù)字問題的運算能力,而廣義上指對輸入信息處理后實現(xiàn)結(jié)果輸出的一種能力。雖然處理的內(nèi)容不同,但處理過程的能力都可抽象為。比
    的頭像 發(fā)表于 11-15 14:22 ?1018次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)篇:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    中科曙光入選2024服務(wù)產(chǎn)業(yè)圖譜及服務(wù)產(chǎn)品名錄

    近日,中國信通院公布首個《服務(wù)產(chǎn)業(yè)圖譜(2024年)》及《服務(wù)產(chǎn)品名錄(2024年)》。
    的頭像 發(fā)表于 08-06 14:23 ?831次閱讀

    服務(wù)器為什么選擇GPU

    隨著人工智能技術(shù)的快速普及,需求日益增長。智中心的服務(wù)器作為支撐大規(guī)模數(shù)據(jù)處理和計算的核心設(shè)備,其性能優(yōu)化顯得尤為關(guān)鍵。而GPU
    的頭像 發(fā)表于 07-25 08:28 ?808次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>為什么選擇GPU

    商湯大裝置服務(wù)獲國家認(rèn)證

    商湯大裝置服務(wù)獲國家認(rèn)證! 近日,經(jīng)過中國電子技術(shù)標(biāo)準(zhǔn)化研究院專家審核,商湯科技通過
    的頭像 發(fā)表于 06-22 10:59 ?660次閱讀

    AI高服務(wù)器散熱,需要用到哪些導(dǎo)熱界面材料?

    在數(shù)字經(jīng)濟、AI大模型等發(fā)展的帶動下,全球服務(wù)器的市場需求急劇提升,利用其強大的計算能力,能夠處理復(fù)雜的算法和海量數(shù)據(jù)。與此同時,生成式人工智能的大需求也拉高了服務(wù)器領(lǐng)域的功耗水平
    的頭像 發(fā)表于 05-30 10:44 ?878次閱讀
    AI高<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>散熱,需要用到哪些導(dǎo)熱界面材料?

    引領(lǐng)柔性新風(fēng)潮,加速企業(yè)數(shù)智轉(zhuǎn)型首選服務(wù)器就是它

    在當(dāng)今云計算時代,企業(yè)對于云服務(wù)器的需求已經(jīng)不僅僅停留在簡單的彈性上,更多的是希望能夠根據(jù)自身業(yè)務(wù)需求,獲得精準(zhǔn)、靈活的計算資源,以實現(xiàn)成本最優(yōu)和業(yè)務(wù)最佳性能。 然而,傳統(tǒng)的云服務(wù)器
    的頭像 發(fā)表于 05-22 19:35 ?359次閱讀
    引領(lǐng)柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>新風(fēng)潮,加速企業(yè)數(shù)智轉(zhuǎn)型首選<b class='flag-5'>服務(wù)器</b>就是它

    智能存在缺口,AI服務(wù)器市場規(guī)模持續(xù)提升

    商的資本支出將大幅增加。全球前四大云服務(wù)商資本支出調(diào)升,預(yù)計將從2023年的1400億美元提升至2024年的超過2000億美元。 ? AI 服務(wù)器市場規(guī)模持續(xù)增長 ? 近些年,人工智能技術(shù)在各個領(lǐng)域廣泛應(yīng)用,包括智能制造、智慧醫(yī)
    的頭像 發(fā)表于 05-22 00:14 ?3159次閱讀

    弘信電子簽訂服務(wù)器產(chǎn)品銷售合同

    弘信電子的子公司甘肅燧弘人工智能科技有限公司與慶陽市京合云計算科技有限公司簽訂了服務(wù)器產(chǎn)品銷售合同 。
    的頭像 發(fā)表于 05-13 11:10 ?596次閱讀

    十問:超,通存比

    鄔賀銓指出,現(xiàn)有測算方法難以精準(zhǔn)衡量。國內(nèi)企業(yè)服務(wù)器的出貨量并不等于國內(nèi)市場的使用量,而且進口國外的服務(wù)器未統(tǒng)計在內(nèi);服務(wù)器出貨量也不等
    的頭像 發(fā)表于 04-13 11:40 ?4766次閱讀

    解鎖未來,華為云耀云服務(wù)器 X 實例引領(lǐng)柔性新時代

    在數(shù)字化浪潮的推動下,云計算已經(jīng)成為企業(yè)發(fā)展的必然選擇,但傳統(tǒng)云服務(wù)器常常束縛了企業(yè)的發(fā)展步伐。云耀云服務(wù)器 X 實例的問世,標(biāo)志著云計算邁向了全新的柔性時代。云耀云
    的頭像 發(fā)表于 04-11 22:23 ?1053次閱讀
    解鎖未來,華為云耀云<b class='flag-5'>服務(wù)器</b> X 實例引領(lǐng)柔性<b class='flag-5'>算</b><b class='flag-5'>力</b>新時代

    256Tops!CSA1-N8S1684X服務(wù)器

    (基于BM1684X的高服務(wù)器)高AI處理BM1684X搭載了BM1684AI
    的頭像 發(fā)表于 03-23 08:02 ?1756次閱讀
    256Tops<b class='flag-5'>算</b><b class='flag-5'>力</b>!CSA1-N8S1684X<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)器</b>

    華為中國合作伙伴大會2024 | 軟通動力全面布局服務(wù)

    使能AI大模型發(fā)展新篇章 北京2024年3月19日 /美通社/ -- 隨著海量數(shù)據(jù)爆發(fā)增長,以及AI大模型訓(xùn)推服務(wù)帶來的巨大需求,對泛在分布的
    的頭像 發(fā)表于 03-19 22:22 ?614次閱讀
    華為中國合作伙伴大會2024 | 軟通動力全面布局<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>服務(wù)</b>

    能RADXA微服務(wù)器試用體驗】Radxa Fogwise 1684X Mini 規(guī)格

    通過網(wǎng)絡(luò)可以了解到,能RADXA微服務(wù)器的具體規(guī)格: 處理:BM1684X :高達(dá)32Tops INT8峰值
    發(fā)表于 02-28 11:21
    百家乐模拟分析程序| 大发888古怪猴子| 百家乐官网投注心态| 金钱豹百家乐的玩法技巧和规则 | 首席百家乐的玩法技巧和规则| 百家乐官网伴侣| 大发888娱乐城qq服务| 百家乐官网必胜法hk | 时时博百家乐官网的玩法技巧和规则| 大发888娱乐场优惠| 百家乐d博彩论坛| 香港百家乐赌场娱乐网规则| 新世纪百家乐官网的玩法技巧和规则| 百家乐官网出千大全| 百家乐网上赌场| 做生意住房买什么朝向| 网上博彩业| 百家乐第三张规则| 丽星百家乐官网的玩法技巧和规则| 百家乐官网大眼仔用法| 网上百家乐是不是真的| 网上百家乐赌博犯法吗| 百家乐官网软件代理| 公主岭市| 百家乐导航| 阿玛尼百家乐的玩法技巧和规则| 丽景湾百家乐官网的玩法技巧和规则 | 博彩网百家乐的玩法技巧和规则| 百家乐官网赌博玩法技巧| 一路发娱乐场| 百家乐挂机软件| 钱隆百家乐官网的玩法技巧和规则 | 六合彩生肖表| 百家乐娱乐场开户注册| 百家乐娱乐城有几家| 路冲铺面能做生意吗| 百家乐官网赌博博彩赌博网| 天天乐线上娱乐| 大发888真钱娱乐下载| 全讯网1932888.com| 真人百家乐园|