MLPerf公布首輪AI推理基準(zhǔn)測試結(jié)果,平頭哥含光800單芯片推理性能第一
11月7日報道
北京時間11月7日,MLPerf基準(zhǔn)聯(lián)盟公布首輪AI推理基準(zhǔn)測試結(jié)果,阿里巴巴平頭哥的AI芯片含光800在Resnet50基準(zhǔn)測試中獲得單芯片性能第一。
MLPerf 推理基準(zhǔn)測試設(shè)有五個基準(zhǔn),每個對應(yīng)四種場景,重點面向圖像分類、對象檢測和機(jī)器翻譯等常見機(jī)器學(xué)習(xí)任務(wù)。測試者可以選擇提交任何基準(zhǔn)及相應(yīng)場景的結(jié)果。
含光800參加了適用于圖像分類任務(wù)的Resnet50v1.5基準(zhǔn)測試,在離線模式(Offline mode)、服務(wù)模式(Servermode)、多路模式(Multi stream mode)和單路模式(Single stream mode)四個場景都取得了單芯片第一的成績。
離線模式測試的是芯片推理的最大吞吐量,最能考驗芯片的計算、存儲、通信等基本功。含光800的成績?yōu)?9306.60IPS,單芯片性能是谷歌TPUv3的8.5倍、Nvidia T4的12倍。
MLPerf是業(yè)內(nèi)首套衡量機(jī)器學(xué)習(xí)軟硬件性能的通用基準(zhǔn),由圖靈獎得主David?Patterson聯(lián)合谷歌和幾所著名高校于2018年發(fā)起。
MLPerf基準(zhǔn)聯(lián)盟現(xiàn)有50多家成員,包括谷歌、微軟、Facebook、阿里巴巴等企業(yè)和斯坦福、哈佛、多倫多大學(xué)等高校。

繼AI訓(xùn)練基準(zhǔn)v0.5、v0.6之后,MLPerf在今年6月推出AI推理基準(zhǔn)v0.5。參加本輪推理基準(zhǔn)測試并提交結(jié)果的公司共14家,谷歌(TPUv3)、英偉達(dá)(T4、RTX、Xavier)、英特爾(CLX 9282、NNPI-1000)、Habana(Goya)等呈現(xiàn)了當(dāng)前AI推理系統(tǒng)最高水平的競逐。
今年9月問世的含光800是阿里巴巴第一款正式流片的AI芯片,基于臺積電12nm工藝生產(chǎn),其性能突破得益于軟硬件的協(xié)同設(shè)計:采用平頭哥自研架構(gòu),有效降低內(nèi)存訪問延時;集成達(dá)摩院的創(chuàng)新算法,深度優(yōu)化CNN及視覺類算法,大幅提升視覺計算效率。
含光800主要用于云端視覺場景,現(xiàn)已大規(guī)模應(yīng)用于阿里巴巴集團(tuán)內(nèi)多個場景,如視頻圖像識別/分類/搜索、城市大腦等,未來還可應(yīng)用于醫(yī)療影像、自動駕駛等領(lǐng)域。
今后,含光800的算力將通過阿里云對外輸出。
作者:郭亞鑫來源:獵云網(wǎng)
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
11月7日立即參評>> 【評選】維科杯·OFweek 2025(第十屆)物聯(lián)網(wǎng)行業(yè)年度評選
-
11月20日立即報名>> 【免費(fèi)下載】RISC-V芯片發(fā)展現(xiàn)狀與測試挑戰(zhàn)-白皮書
-
即日-11.25立即下載>>> 費(fèi)斯托白皮書《柔性:汽車生產(chǎn)未來的關(guān)鍵》
-
11月27日立即報名>> 【工程師系列】汽車電子技術(shù)在線大會
-
11月28日立即下載>> 【白皮書】精準(zhǔn)洞察 無線掌控——283FC智能自檢萬用表
-
12月18日立即報名>> 【線下會議】OFweek 2025(第十屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會
推薦專題
- 1 特斯拉工人被故障機(jī)器人打成重傷,索賠3.6億
- 2 AI 時代,阿里云想當(dāng)“安卓” ,那誰是“蘋果”?
- 3 拐點已至!匯川領(lǐng)跑工控、埃斯頓份額第一、新時達(dá)海爾賦能扭虧為盈
- 4 L3自動駕駛延期,逼出車企技術(shù)自我淘汰
- 5 隱退4年后,張一鳴久違現(xiàn)身!互聯(lián)網(wǎng)大佬正集體殺回
- 6 機(jī)器人9月大事件|3家國產(chǎn)機(jī)器人沖刺IPO,行業(yè)交付與融資再創(chuàng)新高!
- 7 谷歌“香蕉”爆火啟示:國產(chǎn)垂類AI的危機(jī)還是轉(zhuǎn)機(jī)?
- 8 7倍機(jī)器人大牛股:高管股東套現(xiàn)VS機(jī)構(gòu)兇猛抱團(tuán),該信誰?
- 9 八部門聯(lián)手放行L3自動駕駛!巨頭開始拼搶萬億市場?
- 10 OpenAI發(fā)布的AI瀏覽器,市場為何反應(yīng)強(qiáng)烈?


分享













