日本在线www-日本在线播放一区-日本在线不卡免费视频一区-日本在线不卡视频-成人影院久久久久久影院-成人影院一区二区三区

ABB
關注中國自動化產業發展的先行者!
CAIAC 2025
2025工業安全大會
OICT公益講堂
當前位置:首頁 >> 資訊 >> 行業資訊

資訊頻道

概念莫混淆:智能計算機不是超級計算機
  • 點擊數:3501     發布時間:2021-07-20 10:04:00
  • 分享到:
中國科學院計算技術研究所研究員、中國計算機學會高性能計算專業委員會秘書長張云泉告訴《中國科學報》:“智能計算機不是超級計算機,兩者的概念應該區分清楚,否則可能會引起行業混亂。”
關鍵詞: AI , 智能計算機 , GPT-3模型

日前,武漢城市人工智能(AI)計算中心建成投用,媒體在報道該中心算力時稱:“中心一期建設規模100P FLOPS人工智能算力……其算力相當于5萬臺高性能計算機。”該報道一出,引發高性能計算領域專家關注。相關專家對《中國科學報》表示,該報道內容對“超級計算機”與“智能計算機”認識不清、概念混淆,極易引發誤導。 

中國科學院計算技術研究所研究員、中國計算機學會高性能計算專業委員會秘書長張云泉告訴《中國科學報》:“智能計算機不是超級計算機,兩者的概念應該區分清楚,否則可能會引起行業混亂。” 

超級計算機還是智能計算機 

目前業界用于衡量超級計算的Linpack測試,測試的是超級計算機的“雙精度浮點運算能力”,即64位浮點數字的計算(FP64)。在以二進制所表示的數字精度中,還有單精度(32位,FP32)、半精度(16位,FP16)以及整數類型(如INT8、INT4)等。數字位數越高,意味著人們可以在更大范圍的數值內體現兩個數值的變化,從而實現更精確計算。 

與許多科學計算等不同,AI所需的計算力不需要太高精度。“比如一些AI應用需要處理的對象是語音、圖片或視頻,運行低精度計算甚至整型計算即可完成推理或訓練。”張云泉說,這種專用計算機處理AI算法速度快、能耗低,這是由其特點決定的。 

智能計算機是一種專用算力,在推理或訓練等智能計算方面的確表現出色,但由于AI推理或訓練一般僅用到單精度甚至半精度計算、整型計算,多數智能計算機并不具備高精度數值計算能力,這也限制其在AI計算之外的應用場景使用。 

而超級計算機是一種通用算力,其設計目標是提供完備、復雜的計算能力,在高精度計算方面能力更強、應用范圍更廣,比如科學家常使用超級計算機進行行星模擬、新材料開發、分子藥物設計、基因分析等科學計算和大數據處理。 

中國工程院院士陳左寧曾形象地將使用超級計算機做AI計算比喻成“大馬拉小車”,來說明超級計算雖然“十項全能”,但畢竟不是為AI量身打造。智能計算機由此興起。 

此前曾一度熱炒的AI與超算融合,其實正是將改良的計算機“AI專用化”,嚴格意義上來說,它們已經不再屬于傳統超算范疇。 

“現在不論超級計算中心落成還是智能計算中心,都宣稱算力是多少‘FLOPS’,其實這個單位是‘每秒浮點運算能力’,而一些智能計算機的單位其實是‘OPS’——每秒操作次數。如果不加區別地報道,大家很容易誤認為是同一種計算精度、同一種計算能力。”張云泉說,這也導致一些地方以為花了小錢建了世界頂級的“大超級計算”,好像占了便宜;等項目上了馬,將項目介紹給超算業內人士時,才恍然大悟。 

用新指標引導行業健康發展 

張云泉告訴記者,除了混淆智能計算機和超級計算機之外,業內還存在另外一種誤導。 

“有些廠商還會模糊智能計算機的推理性能和訓練性能。”張云泉告訴《中國科學報》,“與推理相比,訓練性能往往需要計算精度高一些,比如32位甚至64位;而大部分性能‘耀眼’的AI芯片,往往指的是其推理性能,而且可能只是理論值。” 

對于AI計算而言,訓練性能往往更重要——許多智能模型正是依賴于此。張云泉說,訓練模型的計算量與參數量成正比,而且需要反復迭代,直到達到理想的效果。 

如果要畫一張AI所需算力的示意圖,“推理”位于算力矩陣的最下層,因為半精度算力(FP16)或整型算力(如INT8)即可滿足推理需要;排在其上的是“訓練”,一般需要使用單精度算力(FP32)或半精度算力(FP16);對算力需求最高的是類腦“模擬”,它需要雙精度算力(FP64)和低精度算力同時支持。 

“混淆傳統超級計算與智能計算、混淆智能計算的訓練性能和推理性能,這兩種情況都可能會導致用戶或地方政府錯誤決策——他們本意是建設強大的計算集群,最后卻只建成了一臺只有推理性能的機器。”張云泉說。 

對此,張云泉認為,需要一個簡單、有效的指標來幫助判斷系統的AI算力和整個高性能AI領域的發展狀況,從而防止行業亂象。

2020年11月,張云泉聯合清華大學教授陳文光、美國阿貢國家實驗室研究員Pavan Balaji和瑞士蘇黎世聯邦理工學院教授Torsten Hoefler,與ACM SIGHPC China委員會共同發起了基于AIPerf大規模AI算力基準評測程序的“國際人工智能性能算力500排行榜”。記者注意到,這一榜單的算力單位是OPS。 

“超級計算與AI計算,一碼歸一碼,需要一個新的標尺來引導AI計算行業走上健康發展的道路。”張云泉說。 

國產AI芯片正待奮起直追 

算力始于芯片。在AI芯片賽道上,我國擁有華為(昇騰)、百度昆侖、燧原等芯片設計企業,但即便如此,國內的智能計算機仍很少能繞過美國GPU巨頭英偉達。 

這是一個無奈的現實:國內上馬諸多智能計算中心,英偉達是切切實實的受益者。 

“專門做智能計算的AI芯片,只要核數足夠多、主頻足夠高,就可以實現速度更快、在低精度計算中高出幾個量級的性能。但如果某個計算集群既需要高精度計算又需要低精度計算,這對AI芯片的要求就高了。”張云泉說,英偉達的GPU各種精度的計算能力都很突出、比較均衡。這也是大部分國產AI芯片難以與英偉達GPU硬碰硬的原因之一。 

不過,國產AI芯片并非完全沒有機會。 

首先,當下我國的算力基礎設施,都有強烈的國產化意愿。即便英偉達、英特爾等巨頭虎踞龍盤,但基于綜合成本、生態等各類因素,國產化的大潮仍不可阻擋。 

其次,就AI當前發展而言,場景、數據、模型、算力缺一不可,這也就意味著,中國將是未來全球AI算力富集地。AI芯片作為核心需要,不可能被一種形態、一種生態所壟斷,寒武紀、昇騰等國產AI芯片的佼佼者仍坐擁巨大發展空間。 

專家認為,雖然芯片是算力的主要來源和最根本的物質基礎,但是算力的生產、聚合、調度和釋放是一個完整過程,需要復雜系統的軟硬件生態共同配合,才能實現“有效算力”。因此,不能只關注芯片的單一性能指標,更要注重上層軟件應用生態。 

沒有巨大算力無法發展AI?

在算力概念被混淆的背后,是AI計算有如脫韁野馬一般瘋長的算力需求。

由多位硅谷“大亨”聯合建立的人工智能非營利組織OpenAI,在2020年5月推出了其新一代無監督的轉化語言模型GPT-3,目前已有1750億參數,訓練數據量達到45TB(約1萬億單詞量)。 

GPT-3模型目前已經在語義搜索、文本生成、內容理解、機器翻譯等方面取得重大突破。其最大價值是證實了機器在無監督下的自我學習能力,驗證了純粹通過擴大規模即可實現性能提升。 

更壯觀的是,萬億參數模型已經在路上。6月初,北京智源人工智能研究院發布了“悟道2.0”,宣稱達到1.75萬億參數,超過之前由谷歌發布的Switch Transformer,成為全球最大的預訓練模型。 

迅猛增長的參數體量,也意味著更高的計算需求——有的可能需要數千塊GPU來提供必要的算力。張云泉說,類似GPT這樣的巨模型,對算力的需求“不是鬧著玩的”。

難道,沒有巨大算力就無法發展AI嗎? 

張云泉認為,在目前AI的發展階段(感知智能和認知智能)中,算力仍然是第一位的。 

他的理由是,發展AI可以通過算力提升、算法革命等途徑進行,但在“資本導向”的現階段,相比不確定性的算法模型突破,算力提升是個更容易的選擇。 

但必須要指出的是,運用巨大算力并不是人工智能發展的唯一方向,GPT-3這樣的巨模型同樣存在缺陷,如缺乏常識等;而探索人腦奧妙機理,實現小數據學習、遷移學習也是重要手段。

畢竟,大腦的功耗只有20瓦左右,創建低能耗的智能系統或許是更重要的努力方向。 

來源:《中國科學報》

熱點新聞

推薦產品

x
  • 在線反饋
1.我有以下需求:



2.詳細的需求:
姓名:
單位:
電話:
郵件:
主站蜘蛛池模板: 欧美极品videosvideohd-欧美极品videosex性欧美-欧美极品jizzhd欧美4k-欧美极品brazzers 高清-伊人久久中文-伊人久久香 | 久 在线播放-九月婷婷人人澡人人添人人爽-九月婷婷人人澡人人爽人人爱-九月丁香婷婷亚洲综合色-天天干天天射天天-天天干天天色综合网 | 欧美成人tv在线观看免费-欧美成人tv-欧美成人h版影院在线播放-欧美成人h版影片在线观看-欧美成人h版白雪公主-欧美成人h版 | 欧洲免费极品videos-欧洲美女高清一级毛片-欧洲精品欧美精品-欧洲精品不卡1卡2卡三卡四卡-中午字幕在线观看-中文字日产幕码三区的做法大全 | 精品性影院一区二区三区内射-精品亚洲成A人20247在线观看-精品亚洲国产成AV人片传媒-精品亚洲国产成人A片在线播放-精品亚洲国产成人A片在线观看-精品亚洲国产熟女福利自在线 | 国语自产视频在线一区二区-国语自产偷拍-国语自产偷拍精品-国语自产偷拍精品视-国语自产偷拍精品视频-国语自产偷拍精品视频蜜芽 99欧美在线-99碰碰-99青草-99青草青草久热精品视频-99青青-99青青草 | 欧美一区不卡二区不卡三区,欧美另类日韩,日韩中文字幕免费版,亚洲一区二区免费看,欧美天天,亚洲欧美另类专区 | 六月婷婷国产精品综合-六六影院午夜伦理-六级黄色片-六度影院最新-最近的2019中文字幕国语完整版-最近的2019中文字幕国语版 | 欧美日韩在线成人免费-欧美日韩在线成人看片a-欧美日韩在线不卡-欧美日韩在线播放-自拍偷拍三级-自拍偷拍欧美亚洲 | 国产午夜视频在线,国产夜夜操,人人添人人澡人人澡人人人爽,欧美日韩国产综合视频在线看,精品久久一区二区,亚洲欧美一区二区三区久久 | 亚洲第一视频网-亚洲第一色在线-亚洲第一色网站-亚洲第一人黄所-亚洲第一区在线观看-亚洲第一区在线 | 日韩成人A片一区二区三区-日韩成人黄色片-日韩成人在线视频-日韩吃奶摸下AA片免费观看-日韩大片免费看-日韩大片在线观看 | 一区二区三区四区免费视频-一区二区三区视频在线观看-一区二区三区视频-一区二区三区欧美日韩-欧美黑人乱大交-欧美黑人巨大性极品hd欧 | 国产一区二区三区四区五区加勒比-国产一区二区三区四区五区六区-国产一区二区三区四区五在线观看-国产一区二区三区无码A片-国产一区二区三区-国产一区二区三区亚洲欧美 | 毛片黄色视频-毛片黄色片-毛片黄-毛片国产-亚洲剧场午夜在线观看-亚洲久操 | 91精品在线播放视频大全在线观看-91精品在线国产一区-91精品在线视频观看-91精品中文字幕-91精品专区-91精品专区国产盗摄 | 麻豆黑色丝袜jk制服福利网站-麻豆精品传媒视频观看-麻豆精品传媒一二三区在线视频-麻豆精选传媒4区2021-在线视频99-在线视频a | 日韩一区二区不卡-日韩一品道-日韩一级一欧美一级国产-日韩一级视频免费观看-亚洲精品AV中文字幕在线-亚洲精品爆乳一区二区H | 国内精品免费久久影院-国内精品蜜汁乔依琳视频-国内精品乱码卡一卡2卡三卡新区-国内精品乱码卡一卡2卡三卡-亚洲国产精品第一影院在线观看-亚洲国产精品VA在线看黑人 | 亚洲免费在线观看-做羞羞的事情的免费视频-最终痴汉电车在线观看-最新综艺-最新自拍偷拍-最新在线精品国自拍视频 | 久久免费资源-久久免费小视频-久久免费手机视频-久久免费视频网站-欧美国产亚洲一区 | 一区二区三区欧美日韩-一区二区三区欧美-一区二区三区免费在线视频-一区二区三区免费在线观看-久久精品店-久久精品第一页 | 亚洲综合在线观看视频-亚洲综合在线观看一区-亚洲综合在线观看一区www-亚洲综合在线视频-亚洲综合在线网-亚洲综合在线一区 | 美女三级毛片-美女牲交视频一级毛片无遮挡-美女视频大全视频a免费九-美女视频黄a视频全免费网站色窝-美女视频黄的全是免费-美女视频秀色福利视频 | jjzz日本女人-jjzz网站-jjzz亚洲亚洲女人-jjzz在线观看-jlzzjizz-jlzzjlzz亚洲日本 | 国产免费区-国产免费久久精品-国产免费久久-国产免费福利-鸥美性生交xxxxx久久久-欧洲黄色毛片 | 国产激情对白一区二区三区四-国产或人精品日本亚洲77美色-国产黄站-国产黄在线免费观看-日韩中文字幕网-日韩中文字幕视频在线观看 | 国产精品视_精品国产免费-国产精品视-国产精品深夜福利免费观看-国产精品三区四区-四虎成人4hutv影院-四虎成年永久免费网站 | 亚洲免费在线观看-做羞羞的事情的免费视频-最终痴汉电车在线观看-最新综艺-最新自拍偷拍-最新在线精品国自拍视频 | 2015天堂网-2014天堂网-19国产精品麻豆免费观看-18视频在线观看网站-18黄免app网站-18成网站www在线观看 | 精品久久久久久蜜臂a∨-精品久久久久久蜜臀-精品久久久久久免费看-精品久久久久久免费影院-精品久久久久久清纯-精品久久久久久日韩字幕无 | 欧美成人tv在线观看免费-欧美成人tv-欧美成人h版影院在线播放-欧美成人h版影片在线观看-欧美成人h版白雪公主-欧美成人h版 | 九九香蕉-九九线精品视频-九九五月天-九九天天影视-天天干b-天天干2018 | 色多多污污在线播放免费-色多多污污下载-色多多污污版免费下载安装-色多多污网站在线观看-第一次破女初国产美女-第一次处破女完整版电影 | 手机看片福利永久国产日韩-手机看片369-手机精品在线-手机国产乱子伦精品视频-国产精品嫩草影院在线观看免费-国产精品嫩草影院在线播放 | 久久99国产精品一区二区,欧美日韩另类在线,婷婷四月开心色房播播网,收集最新中文国产中文字幕,亚洲综合激情六月婷婷在线观看,欧美一级淫片 | 久久久精品国产sm最大网站-久久久精品国产免大香伊-久久久精品国产免费A片胖妇女-久久久精品久久久久久96-久久久精品久久久久久久久久久-久久久精品久久日韩一区综合 | 欧美一区不卡二区不卡三区,欧美另类日韩,日韩中文字幕免费版,亚洲一区二区免费看,欧美天天,亚洲欧美另类专区 | 麻豆国产av国片精品有毛-麻豆国产av巨作-麻豆国产av巨作国产剧情-麻豆国产av丝袜白领传媒-麻豆国产av网站-麻豆国产av尤物网站尤物 | 久久精品免费电影-久久精品免费-久久精品美乳-久久精品美女视频-亚洲最大福利视频-亚洲综合视频一区 | 成人久久久久-成人久久久-成人久久精品一区二区三区-成人久久18免费游戏网站-成人久久18免费网-成人久久18免费软件 |