加入星計劃,您可以享受以下權(quán)益:

  • 創(chuàng)作內(nèi)容快速變現(xiàn)
  • 行業(yè)影響力擴散
  • 作品版權(quán)保護
  • 300W+ 專業(yè)用戶
  • 1.5W+ 優(yōu)質(zhì)創(chuàng)作者
  • 5000+ 長期合作伙伴
立即加入
  • 正文
  • 相關(guān)推薦
  • 電子產(chǎn)業(yè)圖譜
申請入駐 產(chǎn)業(yè)圖譜

ChatGPT熱潮后的反思:我國應加速構(gòu)建新型智能計算中心

2023/03/27
611
閱讀需 5 分鐘
加入交流群
掃碼加入
獲取工程師必備禮包
參與熱點資訊討論

1769年,英國人瓦特改良的蒸汽機掀開了熱力時代的序幕。今天,伴隨AI 算量需求急劇增加倒逼傳統(tǒng)計算架構(gòu)加速革新,數(shù)據(jù)成為關(guān)鍵生產(chǎn)要素,算力時代悄然開啟。

業(yè)內(nèi)普遍認為,算力的提升在拉動GDP方面有非常明顯的效果。有關(guān)國際機構(gòu)統(tǒng)計,中國總算力排在全球第二,僅次于美國,但人均算力方面中國還處于中等發(fā)展國家水平,因此存在很大的鴻溝去跨越??梢钥吹剑懔Φ乃胶蛧抑悄芩接泻艽蟮年P(guān)系,5G物聯(lián)網(wǎng)、區(qū)塊鏈、元宇宙、AR/VR等新興技術(shù)的普及與發(fā)展帶來了爆發(fā)式的算力需求。

實際上,早在2018年,中國科學院計算技術(shù)研究所研究員張云泉就首次提出了“算力經(jīng)濟”概念,指出以計算為核心的算力經(jīng)濟將成為衡量一個地方數(shù)字經(jīng)濟發(fā)展程度的代表性指標和新舊動能轉(zhuǎn)換的主要手段。經(jīng)過5年的發(fā)展,當前的趨勢已經(jīng)充分表明,隨著超算與云計算大數(shù)據(jù)、人工智能的融合創(chuàng)新,算力成為當前整個數(shù)字經(jīng)濟社會發(fā)展的關(guān)鍵推動力。

今天,計算已經(jīng)成為智能世界的關(guān)鍵驅(qū)動力,算力服務業(yè)的崛起意味著我們正式進入算力經(jīng)濟時代?!八懔Ψ諛I(yè)在2021年至2022年間異軍突起,今年會更加火爆?!睆堅迫赋觯绻f算力是硬件軟件配合共同執(zhí)行某種計算需求的能力的話,那么,算力服務是提供算力的一種商業(yè)模式,是包括算力生產(chǎn)者、算力調(diào)度者、算力服務商以及算力消費者在內(nèi)的算力產(chǎn)業(yè)鏈上算力經(jīng)濟模式的統(tǒng)稱,他們共同構(gòu)成一個閉環(huán)的“算力經(jīng)濟”的產(chǎn)業(yè)鏈。

伴隨算力經(jīng)濟的發(fā)展,超算技術(shù)和人工智能的融合創(chuàng)新讓智能計算中心成為新基建熱點。智能計算中心指的是專門用于人工智能計算的中心。今天,可以看到,智能計算中心越來越熱,使得人工智能訓練的效果特別好,除了寫新聞,還可以編故事、聊天,做很多事情。

摩爾定律放緩的情況下,以英偉達NVIDIA)創(chuàng)始人黃仁勛名字命名的定律“黃氏定律 (Huang’s Law)”對AI性能的提升作出預測,每10年GPU性能增長1000倍?!拔磥鞧PT-4的參數(shù)規(guī)模或?qū)⑦_到數(shù)萬億,至少需要上萬塊的GPU,甚至連國家超算中心都無法滿足需求,建設(shè)新的智能計算平臺成為人工智能新的發(fā)展方向?!睆堅迫f道。

像GPT-3就帶來了感知智能對超算的算力挑戰(zhàn)。從CPT-3到ChatGPT的技術(shù),實際上是“人工反饋(RLHF)訓練機制+大數(shù)據(jù)+大算力”的集成。大模型帶來巨大的AI算力需求缺口,呼喚新型智能計算中心的加速構(gòu)建。

“為什么ChatGPT能從GPT-3演變過來,這是關(guān)鍵,也是中國人工智能之路和美國人工智能之路的分歧點?!睆堅迫赋?,“這兩年大模型國內(nèi)有人做,但是我們追求的是參數(shù)量,從千億級到萬億級訓練參數(shù)的快速躍進,但是智能沒有涌現(xiàn)。OpenAI走了另外一條路,利用人工反饋的訓練機制,通過標注、對齊高質(zhì)量數(shù)據(jù),最后把這條路走通了,用千億參數(shù)的大模型把通用智能挖掘出來了,這點值得反思?!?/p>

張云泉認為,未來算力經(jīng)濟市場會有三類公司參加,將出現(xiàn)類似發(fā)電廠的算力工廠,尤其是在東數(shù)西算西部新能源發(fā)達地區(qū),而網(wǎng)絡通信公司可通過實施算網(wǎng)融合戰(zhàn)略轉(zhuǎn)型為算力供應商,超算云公司、網(wǎng)絡通信公司甚至國家電網(wǎng)等分別從不同的技術(shù)途徑搶占算力服務市場,究竟鹿死誰手尚未可知。

他建議,一是要在現(xiàn)有大科學裝置基礎(chǔ)上,圍繞“東數(shù)西算”重大任務目標增加建設(shè)一類算力網(wǎng)工程技術(shù)裝置;二是要成立國家算網(wǎng)管理機構(gòu)和專家委員會,建設(shè)國家級算力調(diào)度和交易平臺;三是在智算中心建設(shè)過程中,依據(jù)自有品牌核心器件成熟度和應用效果,設(shè)置合理的核心器件采購比例,扶植和拉動本土算力設(shè)備的發(fā)展。

作者丨宋婧

編輯丨諸玲珍

美編丨馬利亞

監(jiān)制丨連曉東

相關(guān)推薦

電子產(chǎn)業(yè)圖譜