算力概念熱度持續升溫。此前,一則署名為北交所上市公司董事長(cháng)的微信朋友圈消息在市場(chǎng)上流傳,信息內容顯示:“我們算力服務(wù)已經(jīng)上線(xiàn)10000張A800/A100卡,今年另有12000張H800卡在逐步上線(xiàn)中,超算模式算力,價(jià)格極具競爭力,歡迎試用。”
無(wú)獨有偶,近期亦有消息稱(chēng),因算力需求旺盛、供給緊張,某互聯(lián)網(wǎng)巨頭已暫停A100服務(wù)器出租業(yè)務(wù)。這一消息雖未得到證實(shí),但也同樣暴露了國內算力租賃市場(chǎng)需求量遠超供應量,存在巨大缺口。有機構分析指出,行業(yè)供求矛盾升級,算力租賃行業(yè)將進(jìn)入新一輪漲價(jià)周期。
大模型“炒熱”算力租賃,撐起行業(yè)藍海
算力是當代生產(chǎn)力,超級計算也被稱(chēng)為高性能計算,同時(shí)使用幾十臺甚至幾千臺服務(wù)器這樣龐大的算力資源共同完成一個(gè)計算任務(wù)。
人工智能大模型的爆發(fā)讓算力需求激增。由于A(yíng)I大模型需要大量的計算資源進(jìn)行訓練和推理,而許多個(gè)人和企業(yè)無(wú)法承擔購買(mǎi)和維護這些硬件設備的成本。因此,算力租賃提供了一個(gè)經(jīng)濟有效的方式來(lái)獲得所需的計算資源。根據有關(guān)數據預測,2023年AI服務(wù)器(包含搭載GPU、FPGA、ASIC等)出貨量近120萬(wàn)臺,年增38.4%;占整體服務(wù)器的出貨量有望從2023年近9%提升至2026年15%;同時(shí)2022—2026年AI服務(wù)器出貨量年復合成長(cháng)率至22%。
今年來(lái),隨著(zhù)AI大模型的涌現,計算芯片依賴(lài)已從CPU轉向GPU,也就意味著(zhù),GPU成為驅動(dòng)AI技術(shù)發(fā)展以及應用落地的關(guān)鍵引擎,像大模型訓練、推理也催生了大量AI算力需求。
對標GPT-3和GPT-4模型,GPT-3模型訓練使用了128臺英偉達A100服務(wù)器(訓練34天),對應640P算力,GPT-4模型訓練使用了3125臺英偉達A100服務(wù)器(訓練90-100天),對應15625P算力。從GPT-3至GPT-4模型參數規模增加約10倍,但用于訓練的GPU數量增加了近24倍(且不考慮模型訓練時(shí)間的增長(cháng))。
因此,上游AI算力資源作為重要支撐,稀缺性凸顯。在此背景下,AI算力租賃需求爆發(fā),也是在情理之中。據專(zhuān)業(yè)機構預測,未來(lái)每家龍頭大模型廠(chǎng)商推理側A100需求有望達到十萬(wàn)張量級,一片藍海市場(chǎng)。
人民數據資產(chǎn)服務(wù)平臺數據顯示,2023年10月18日—11月17日,關(guān)于“算力租賃”的相關(guān)信息量超過(guò)8萬(wàn)余條,環(huán)比增加232.45%,相關(guān)信息傳播聲量在11月達到高峰,相關(guān)話(huà)題相繼在新聞資訊、兩微一端、論壇、網(wǎng)絡(luò )媒體等多個(gè)平臺被轉發(fā)關(guān)注。其中,新聞資訊和兩微一端及論壇成為輿論發(fā)酵的主要陣地,相關(guān)信息的傳播分布占比近98.18%。網(wǎng)民關(guān)注“利好”“漲停”“算力”等熱詞。
圖:截至2023年11月17日算力租賃A股指數周K線(xiàn)
圖:截至2023年11月17日“算力租賃”有關(guān)信息渠道分布
超算架構為大模型訓練提速
我國算力業(yè)務(wù)前景可期
目前,我國算力規模整體保持高速增長(cháng),2022年達302EFlops,連續兩年增速近50%;超算算力占比尚小但持續增長(cháng),2022年達3.9EFlops,連續兩年增速超30%。
有關(guān)機構研報顯示,以訓練一次1746億參數的GPT-3模型為例,需要算力約為3640PFlop/s-day,完成一次訓練成本過(guò)億元。
目前,地方政府是AI智算中心建設的主要規劃與投資方。根據有關(guān)數據顯示,全國有超過(guò)30個(gè)城市正在建設或規劃智算中心,其中一些已經(jīng)投入運營(yíng)或即將投入運營(yíng),總規劃算力達到了數十EFlops。若假設未來(lái)全國智算中心算力達到50EFlops(對應50000PFlops),對應AIDC建設規??臻g為500-750億元。
圖:部分地方政府智算中心建設規劃
此前,人民數據中原算力中心在河南鄭州正式啟動(dòng)。人民數據中原算力中心由人民數據與中創(chuàng )算力共同建設,將以數字新基建數據中心作為重點(diǎn),為地方政府提供數字新基建下的技術(shù)支持、容災備份、產(chǎn)業(yè)賦能等全方位的服務(wù),為政府和企業(yè)搭建一個(gè)集政、產(chǎn)、學(xué)、研為一體的新基建協(xié)同協(xié)作平臺。