阿里:平頭哥含光800單芯片性能測試拿了項第一

北京時間11月7日,MLPerf基準聯盟公佈首輪AI(人工智能)推理基準測試結果,阿里巴巴平頭哥的AI芯片含光800在Resnet50基準測試中獲得單芯片性能第一。

MLPerf 推理基準測試設有五個基準,每個對應四種場景,重點面向圖像分類、對象檢測和機器翻譯等常見機器學習任務。測試者可以選擇提交任何基準及相應場景的結果。

據阿里巴巴方面披露的信息,含光800參加了適用於圖像分類任務的Resnet50 v1.5基準測試,在離線模式(Offline mode)、服務模式(Server mode)、多路模式(Multi stream mode)和單路模式(Single stream mode)四個場景都取得了單芯片第一的成績。

離線模式測試的是芯片推理的最大吞吐量,最能考驗芯片的計算、存儲、通信等基本功。據阿里介紹,含光800的成績為69306.60 IPS,單芯片性能是谷歌TPU v3的8.5倍、Nvidia T4的12倍。

MLPerf是業內首套衡量機器學習軟硬件性能的通用基準,由圖靈獎得主David Patterson聯合谷歌和幾所著名高校於2018年發起。MLPerf基準聯盟現有50多家成員,包括谷歌、微軟、Facebook、阿里巴巴等企業和斯坦福、哈佛、多倫多大學等高校。

繼AI訓練基準v0.5、v0.6之後,MLPerf在今年6月推出AI推理基準v0.5。參加本輪推理基準測試並提交結果的公司共14家,谷歌(TPUv3)、英偉達(T4、RTX、Xavier)、英特爾(CLX 9282、NNPI-1000)、Habana(Goya)等參與競逐。

今年9月問世的含光800,是阿里巴巴第一款正式流片的AI芯片,基於臺積電12nm工藝生產,其性能突破得益於軟硬件的協同設計:採用平頭哥自研架構,有效降低內存訪問延時;集成達摩院的創新算法,深度優化CNN及視覺類算法,大幅提升視覺計算效率。

含光800主要用於雲端視覺場景,現已大規模應用於阿里巴巴集團內多個場景,如視頻圖像識別/分類/搜索、城市大腦等,未來還可應用於醫療影像、自動駕駛等領域。今後,含光800的算力將通過阿里雲對外輸出。


分享到:


相關文章: