谁有黄色在线观看,2018天天拍拍天天爽视频,大鸡巴嗯嗯啊嗯啊嗯啊嗯啊嗯啊日逼视频,日韩va免费线上看

首頁 / 

鄭緯民院士:國產(chǎn)芯片主要問題在于生態(tài)系統(tǒng)不夠好,生態(tài)做好了,硬件稍弱也行

發(fā)表時間:2023-12-07 13:43
分享到:
  在12月5日舉辦的2023世界5G大會先導論壇上,中國工程院院士、清華大學計算機科學與技術(shù)系教授鄭緯民,圍繞中國算力“破局”現(xiàn)狀分享了自己的觀點。
  他介紹,當前共有三種支持大模型訓練的算力系統(tǒng):其一是基于英偉達公司的GPU系統(tǒng),也是很多人使用的;其二是基于國產(chǎn)AI芯片的系統(tǒng);另一個是基于超級計算機的系統(tǒng)。
  他展開分析道,英偉達的GPU系統(tǒng)優(yōu)點是硬件性能好,且編程生態(tài)好,因此很多人喜歡用這個系統(tǒng)做大模型。但可惜的是,美國政府不允許它的芯片再賣到中國,現(xiàn)在能買到的(芯片)從12月開始漲了一倍,關(guān)鍵是一卡難求,買不到。
  在科技制裁的情況下,中國加快了自研芯片的步伐。他表示,國內(nèi)現(xiàn)在差不多有30家公司生產(chǎn)類似的芯片,但關(guān)鍵問題在于國內(nèi)卡的生態(tài)系統(tǒng)不太好,國產(chǎn)的卡用戶不喜歡用。
  鄭緯民解釋道,所謂生態(tài)系統(tǒng)好與不好,關(guān)鍵要看軟件是否易于移植,以及可調(diào)用的庫是否全面。
  “比如原來一個軟件是基于國外系統(tǒng)寫的,現(xiàn)在想把它移植到國內(nèi)系統(tǒng)來,如果移植起來比較順利那說明系統(tǒng)還不錯,否則這個生態(tài)系統(tǒng)就是不好。另外,如果想寫一個軟件,寫起來比較順利,不要讓我一寫沒這個庫,一寫沒那個調(diào)用方法,那這個系統(tǒng)就是好的?!?/div>
  談及如何能把國產(chǎn)系統(tǒng)芯片升級到更好,鄭緯民列出了一些關(guān)鍵要素,包括要做好編程框架、提高卡的并行加速能力、還要做好通信庫、算子庫、編譯器、調(diào)度器、內(nèi)存分配系統(tǒng)、容錯系統(tǒng)以及存儲系統(tǒng)。
  他表示,并不是說國內(nèi)的30家公司都沒有做這些,而是說功能做的還不夠齊,性能還不夠好。他強調(diào),“一定要下功夫把這些做好,才能真正叫做好了生態(tài)。”
  “我們不要求國產(chǎn)芯片一下子要比別人的更好,如果國產(chǎn)AI芯片硬件性能可以達到國外芯片的60%,并把以上列舉到的關(guān)鍵點做好,將會讓更多的用戶滿意。因為大多數(shù)用戶不會因為60%的性能感到不滿意,不滿意的是生態(tài)系統(tǒng)做的還不夠好。如果生態(tài)做好了,硬件稍微弱一點也行。生態(tài)不好,硬件很行也沒有用?!彼a充道,“當然硬件也很重要,硬件都沒做出來的話,生態(tài)就更談不上了?!?/div>
  對于超級計算機系統(tǒng)而言,鄭緯民認為這也是可以用來訓練大模型的一種方式。他表示,國內(nèi)現(xiàn)在有14個國家一級超算中心,有些地方機器用的還不是很滿,完全可以以租用的方式進行訓練大模型,費用成本基本是英偉達的六分之一。
  最后,鄭緯民指出,除了要發(fā)展算力系統(tǒng)外,加強程序員對現(xiàn)有多種類軟硬件系統(tǒng)的認知能力也非常重要,這樣才能做好任務(wù)分配,將現(xiàn)有設(shè)備性能發(fā)揮出最大作用。
  他表示,過去一臺機器,基本就是“CPU+內(nèi)存+硬盤”的模式,但現(xiàn)在除了CPU以外,還有GPU、TPU等各種各樣的模式。硬盤也是,有很多新的存儲器件出來。軟件也不一樣了,不管是人工智能應(yīng)用軟件,還是基于圖數(shù)據(jù)的圖計算應(yīng)用,其實都在發(fā)生變化。
  “10年前,做天氣預報系統(tǒng)的人懂‘FORTRAN語言’,懂數(shù)據(jù)結(jié)構(gòu),知道如何把軟件寫好就行。但現(xiàn)在需要更深度地理解現(xiàn)有的這些更復雜的軟硬件系統(tǒng),了解怎么將軟硬件更好地做匹配,不然編出來的軟件要么轉(zhuǎn)不起來,要么轉(zhuǎn)起來了但性能會很差。”(邢丹)
 
編輯:李芊諾
責編:邢丹
審核:陳雪輝
分享到:
評論一下
評論 0人參與,0條評論
還沒有評論,快來搶沙發(fā)吧!
最熱評論
最新評論
已有0人參與,點擊查看更多精彩評論

請輸入驗證碼