《電子技術應用》
您所在的位置:首頁 > 嵌入式技術 > 解決方案 > 打造 “CPU+” 異構計算平臺,Arm 靈活應對各類 AI 工作負載

打造 “CPU+” 異構計算平臺,Arm 靈活應對各類 AI 工作負載

2024-12-31
來源:Arm
關鍵詞: ARM AI CPU

  對于人工智能 (AI) 而言,任何單一硬件或計算組件都無法成為適合各類工作負載的萬能解決方案。AI 貫穿從云端到邊緣側的整個現代計算領域,為了滿足不同的 AI 用例和需求,一個可以靈活使用 CPU、GPU 和 NPU 等不同計算引擎的異構計算平臺必不可少。

  依托于 Arm CPU 的性能、能效、普及性、易于編程性和靈活性,從小型的嵌入式設備到大型的數據中心,Arm CPU 已經為各種平臺上的 AI 加速奠定了基礎。

  就靈活性而言,這對生態系統大有裨益的三個主要原因是,首先,Arm CPU 可以處理廣泛的 AI 推理用例,其中許多用例通常用于數十億臺設備,例如當今的智能手機、云和數據中心。不僅如此,除了推理之外,CPU 還經常用于技術棧中的數據預處理和編排等其他任務。其次,開發者能夠在更多種類的數據格式中運行更廣泛的軟件,而無需構建多個版本的代碼。最后,CPU 的靈活性使之成為加速 AI 工作負載的理想工具。

  提供多樣性和選擇,助力行業靈活部署 AI 計算

  除了 CPU 產品組合外,Arm 計算平臺還包括 GPU 和 NPU 等 AI 加速器技術,許多市場都在將這些技術與 CPU 進行集成。

  在移動端領域,Arm 終端計算子系統 (CSS) 包含 Armv9.2 CPU 集群,并與 Arm Immortalis-G925 GPU 集成,可為各種 AI 用例提供加速功能,包括圖像分割、對象檢測、自然語言處理和語音轉文本等用例。在物聯網 (IoT) 方面,Arm Ethos-U85 NPU 可與需要加速 AI 性能的基于 Arm Cortex-A 的系統一起設計,例如工廠自動化等場景。

  此外,除了 Arm 自己的加速器技術外,合作伙伴借助 Arm 的 CPU 靈活定制具有差異化的芯片解決方案。例如,NVIDIA 用于 AI 基礎設施的 Grace Blackwell 和 Grace Hopper 超級芯片均采用了 Arm CPU 和 NVIDIA 的 AI 加速器技術,從而顯著提升 AI 性能。

  NVIDIA Grace Blackwell 超級芯片將 NVIDIA 的 Blackwell GPU 架構與基于 Arm Neoverse 的 Grace CPU 相結合。Arm 獨特的產品組合使 NVIDIA 能夠進行系統級設計優化,與 NVIDIA H100 GPU 相比,其能耗降低了 25 倍,單個 GPU 性能提高了 30 倍。具體來說,得益于 Arm Neoverse 平臺的靈活性,NVIDIA 能夠實現自有的高帶寬 NVLink 互連技術,并提升 CPU、GPU 和內存之間的數據帶寬和延遲。

  Arm 致力于通過 Arm 全面設計生態項目,為整個生態系統注入 AI 加速的機遇。通過該生態項目,開發者可以更快訪問 Arm CSS 技術,賦能軟硬件技術進步,以此驅動 AI 和芯片創新,并加快開發和部署 AI 優化的芯片解決方案。

  Arm 架構滿足 AI 所需的獨特靈活性

  Arm CPU 設計所具有靈活性關鍵在于 Arm 領先的架構。它提供了一個可以與 AI 加速器技術緊密集成的基礎平臺,并支持從 128 位到 2,048 位的各種向量長度,可以在許多不同的數據點上輕松執行多個神經網絡。

  Arm 架構的靈活性為整個芯片生態系統提供了多樣化的定制機會,Arm 一直致力于幫助合作伙伴更快地構建自己的差異化芯片解決方案。這種獨特的靈活性也使 Arm 能夠不斷進行架構創新,定期推出關鍵指令和功能來加速 AI 計算,進而惠及整個生態系統,其中包括領先的芯片合作伙伴,以及在 Arm 計算平臺上構建應用的 2,000 多萬軟件開發者等。

  這一切始于 Armv7 架構,該架構引入了高級單指令多數據 (SIMD) 擴展,例如 Neon 技術,這是 Arm 首次涉足機器學習 (ML) 工作負載。在過去幾年中,該架構不斷增強,Armv8 中增加了向量點積和矩陣乘法特性,之后在 Armv9 中又引入了 Arm SVE2 和新的 Arm SME 技術 ,為廣泛的生成式 AI 工作負載和用例提高了計算性能并降低了功耗。

  與 AI 加速器技術無縫集成

  Arm 是 AI 時代的計算平臺,推動了持續的架構創新,以滿足速度更快、互動性更好和沉浸感更強的 AI 應用的發展。Arm CPU 作為靈活處理 AI 工作負載的異構計算方法中的一部分,可以無縫增強和集成 GPU 和 NPU 等 AI 加速器技術。

  Arm CPU 是處理眾多 AI 推理工作負載的實用之選,憑借出色的靈活性,它能夠與加速器技術無縫集成,打造更強大、更高性能的 AI 功能,精準滿足特定用例和計算需求。對于 Arm 的技術合作伙伴而言,出色的靈活性有助于實現豐富的定制選擇,使他們能夠為 AI 工作負載構建完整的芯片解決方案。




更多精彩內容歡迎點擊==>>電子技術應用-AET<<

3952966954c9c6c308355d1d28d750b.jpg

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:[email protected]
主站蜘蛛池模板: 欧美日韩高清不卡一区二区三区 | 亚洲国产精品成人午夜在线观看 | 国产a网| 国产成人永久免费视频 | 高清波多野结衣一区二区三区 | 成人在线中文字幕 | 2020精品极品国产色在线观看 | 精品久久久久久综合网 | 国产色a在线观看 | 久久久久久久久久免免费精品 | 成人国产精品视频 | 国产在线综合一区二区三区 | 国产大陆精品另类xxxx | 美女张开腿让人桶 | 久久久久国产精品免费看 | 久久99精品久久久久久国产越南 | 亚洲成a人v大片在线观看 | 久久久久久尹人网香蕉 | 国产91在线精品 | 日韩 欧美 自拍 在线 视频 | 国产欧美另类 | 久久久久久久久中文字幕 | 欧美高清一区 | 日本三级韩国三级在线观看a级 | 呦女亚洲一区精品 | 久久久久久免费播放一级毛片 | 中国老太卖淫播放毛片 | 999热精品这里在线观看 | 成人爽a毛片在线视频 | 波多野结衣视频免费 | 亚洲欧美日本在线 | 精品国产一区二区三区2021 | 欧美人与z0z0xxxx| 小泽玛利亚的一级毛片的 | 亚洲国产精品成人午夜在线观看 | 亚洲图片国产日韩欧美 | 国产aaa级一级毛片 国产aaa毛片 | 国产v日韩v欧美v精品专区 | 日本午夜精品 | 国产在线播放免费 | 香港激情黄三级在线视频 |