定義與範疇
AI XPU泛指用於人工智慧計算的加速處理器單元。其設計目標是高效處理AI工作負載(如神經網路),旨在提供比通用處理器更高的能效和更低的延遲,並具備強大的並行計算能力。
其套用覆蓋數據中心和邊緣等廣泛場景,以滿足不同場景下對性能、能效和物理尺寸的差異化需求。
從物理形態上,AI XPU主要分為兩大類:一是作為獨立的離散硬體與
CPU協同工作;二是作為集成在CPU內部的專用加速引擎。
主要類型
AI XPU有多種分類,包括按部署場景(如數據中心、邊緣)和架構形態(如專用
ASIC、可程式邏輯)等。隨著晶片構造方式的變化,大量異構處理器方案不斷衍生,共同構成了支持多樣化AI工作負載的異構計算體系。
圖形處理器(GPU)憑藉其強大的並行計算能力及通用性,已成為深度學習模型訓練的主要硬體。
張量處理器(TPU)是谷歌專為加速機器學習任務而設計的專用積體電路(ASIC)晶片,以其高效率和能效比著稱。神經處理單元(
NPU)是一種利用電路模擬人類神經元和突觸結構的處理器,特別擅長處理視頻、圖像類的海量多媒體數據。
現場可程式門陣列(
FPGA)具有高度靈活性,可根據需求重新編程和配置,尤其適合需要實時處理和低功耗的套用場景。
數據處理器(
DPU)用於最佳化卷積神經網路,能夠卸載CPU的基礎層套用(如網路協定處理、加密解密、數據壓縮等),與CPU、GPU形成優勢互補。智慧型處理單元(IPU)由Graphcore公司提出,採用大規模並行同構眾核架構,設計兼顧AI訓練與推理。集成AI加速器是內置於CPU中的加速引擎,旨在提供最佳化的AI性能並簡化系統設計。
技術架構
AI XPU的技術架構基礎包括
指令集架構(ISA)、特定領域的ISA、超長指令字(
VLIW)架構、脈動陣列、
可重構處理器(如
FPGA)、數據流操作以及記憶體處理技術。許多AI XPU設計採用近數據處理(near-data processing)方法以降低記憶體成本,其極端形式是存內處理(PIM)。
AI XPU硬體性能的充分發揮依賴其專用的軟體棧以實現系統級性能。為了實現
TensorFlow、PyTorch等高層次軟體框架與不同AI XPU硬體之間的互操作性,機器學習編譯器(如Facebook Glow)應運而生。
AI加速器的性能評估標準不一。為了進行獨立的評估,業界可參考MLPerf組織提供的基準測試,該組織由來自工業界和學術界的工程師與研究人員組成,旨在評估機器學習硬體、軟體和服務的訓練與推理性能。
AI XPU的設計趨勢因套用場景而異。在數據中心側,設計側重於大規模可擴展的計算架構以滿足超大規模數據中心的需求。而在邊緣側,設計則需應對極低的功耗要求、高度的設計可變性以及感測器等異構集成帶來的挑戰。
典型產品
AI XPU領域的主要參與者包括大型雲服務商和超大規模數據中心運營商。
谷歌TPU
谷歌TPU是專為加速深層神經網路運算能力而研發的
ASIC晶片,其計算核心採用脈動陣列架構。TPU與同期的
CPU和GPU相比,能效比顯著提升,它可以組合在pod配置中,為訓練
神經網路模型提供超過100 petaFLOPS的處理能力。
微軟Maia系列
微軟推出了定製AI加速器系列Maia。
Maia 100晶片設計用於支持AI訓練和推理,專門設計用於運行
OpenAI的
GPT。
Maia 200是其繼任者,專門針對AI推理進行最佳化。Maia 200採用
台積電3納米(N3P)工藝,擁有1440億個電晶體,記憶體容量216 GB,頻寬7 TB/秒,在
FP4精度下算力為10.15 petaflops。
AMD Instinct系列
AMD Instinct是面向高性能計算和人工智慧的加速器產品線。其Instinct MI300系列中,MI300A是全球首款面向HPC、AI的APU加速器,MI300X則是純
GPU加速器,配備192GB HBM3記憶體,頻寬達5.2TB/s,集成1530億個電晶體。該系列已投入商用,例如用於EI Capitan超級計算機。
英特爾酷睿Ultra處理器
英特爾酷睿Ultra處理器是集成神經處理單元(
NPU)的客戶端處理器。它採用
CPU、GPU、NPU三級XPU協同設計,總算力可達34 TOPS。其基於NPU4設計的Lunar Lake處理器性能較前代大幅提升。
百度崑崙(Kunlun)晶片
百度自研的AI晶片最初基於FPGA的雲計算加速晶片命名為XPU。崑崙晶片採用14nm製程,支持其深度學習平台Paddle(
飛槳),面向雲計算和邊緣計算場景。
市場套用與前景
AI XPU已廣泛套用於技術棧的各個層級。在端側設備(如智慧型手機)中,通常集成
NPU以實現低功耗、低延遲的AI體驗;在邊緣計算場景(如工業機器人、自動駕駛),
FPGA等靈活、高效的加速器被廣泛部署;在數據中心和雲計算領域,GPU及谷歌TPU、微軟Maia等定製化AI加速器則承擔著大規模模型訓練和高並發推理任務。
AI XPU正驅動AI PC等新設備形態的發展。以英特爾酷睿Ultra處理器為例,其集成了
CPU、GPU和
NPU三級XPU架構,可提供高達34 TOPS的AI算力。新一代處理器(如Lunar Lake)的NPU性能持續提升,功耗顯著降低。預計到2025年,將有超過1億台搭載NPU的AI PC投放市場。
AI XPU的市場重要性日益凸顯。根據市場分析,2025年,用於AI系統的XPU、GPU處理器、HBM記憶體及網路晶片的銷售額已占全球晶片總銷售額的近三分之一。以主要AI XPU供應商
英偉達為例,其在2025年的營收已達2057.32億美元,占全球前十大Fabless企業總營收的57%。同時,AI XPU相關設計企業也實現了顯著增長,
博通、
AMD、
Marvell等企業均受惠於企業級AI業務,在2025年實現了30%及以上的營收增長,其中博通以397.27億美元的營收超越
高通,成為全球第二大Fabless企業。預測顯示,到2029年,AI半導體(含AI XPU)將占據全球晶片總收入的50%以上。在此期間,AI XPU(包括GPU)的銷售額預計將增長2.3倍,達到4650億美元。
產業生態方面,為最佳化成本與性能、掌握核心技術,大型雲服務商和AI模型開發商正積極自研定製AI XPU。例如,微軟推出了專為AI推理設計的
Maia 200加速晶片,以支持其AI平台和大模型服務。同時,開放生態建設也在推進,如
英特爾基於其覆蓋雲、邊、端的XPU硬體體系,聯合行業夥伴打造開放的AI生態平台。
綜上所述,AI XPU憑藉其卓越的並行處理與能效優勢,已成為推動
大模型訓練、縮短開發周期、並最終賦能千行百業智慧型套用商業化落地的核心算力基礎。