HBM vs GDDR:頻寬、封裝、成本與 AI GPU 用途有甚麼分別?
目錄
HBM 與 GDDR 都是 GPU/AI 加速器可使用的本地 DRAM,差別在於怎樣取得頻寬。 HBM 把多層 DRAM 垂直堆疊,以超寬接口及先進封裝放在計算晶片旁;GDDR 把多顆高速封裝晶片放在電路板上,以較窄總線和更高單針傳輸速率搬運資料。[1] [2]
HBM 通常提供更高的整機總頻寬和較佳頻寬/瓦特,代價是封裝複雜、供應鏈較長、成本和合格產能受限。GDDR 的板級設計與採購較靈活,適合圖形、工作站和部分成本敏感的 AI 加速;它並非只屬於遊戲顯示卡,GDDR7 的官方應用亦包括 AI 與高效能運算。[3]
對投資者最重要的結論是:HBM 與 GDDR 不是新舊世代的勝負,而是頻寬、容量、功耗、封裝、可交付數量和每次工作負載成本之間的取捨。 本文證據截至 2026 年 9 月 2 日。
HBM 與 GDDR 的核心差異是甚麼?
| 比較維度 | HBM | GDDR |
|---|---|---|
| 物理形態 | 多層 DRAM 裸晶垂直堆疊 | 多顆獨立封裝 DRAM |
| 系統位置 | 透過中介層或先進封裝靠近 GPU/ASIC | 焊接在 PCB,以板級線路連接處理器 |
| 取得頻寬的方法 | 超寬接口、較低單針速率、大量並行 I/O | 較窄總線、很高單針速率、多顆晶片並行 |
| 容量與擴充 | 受 stack 數、堆疊高度、封裝面積和產品設計限制 | 可按總線、PCB 空間和器件密度配置 |
| 功耗焦點 | 短距離、寬接口有利頻寬/瓦特 | 高速板級訊號需處理功耗、散熱和訊號完整性 |
| 交付瓶頸 | DRAM 良率、TSV、堆疊、base die、封裝與測試 | GDDR 晶片、控制器、PCB 走線、散熱與供應 |
| 常見用途 | 大型 AI 訓練、高吞吐推理、HPC | 遊戲、工作站、視覺計算、部分 AI 推理與加速 |
表格比較架構層差異;個別產品規格會隨世代改變。AMD 的新一代 CDNA 平台把多個 HBM stack 與計算、I/O 及先進封裝整合,說明高階加速器的頻寬是整顆封裝設計的結果,因此要按整顆封裝衡量頻寬。[4]
為甚麼單針 Gbps 不能直接比較整機 TB/s?
記憶體頻寬可先用這個簡化關係理解:
理論總頻寬 ≈ 每針傳輸速率 × 有效接口寬度 × 通道/器件配置
GDDR 強調每個引腳傳得更快;HBM 則同時使用大量較短的連接。兩種方法都能提高總頻寬,但工程代價不同。因此,某顆 GDDR 晶片的單針 Gbps、某個 HBM stack 的總 TB/s,以及一張加速卡內所有記憶體的總頻寬,屬於三個不同比較層級。
只有把世代、容量、接口、器件數量、功耗口徑和整機配置固定,倍數比較才有意義。峰值頻寬亦不等於應用一定取得相同比例的速度提升;記憶體控制器、資料重用、計算密度、GPU 互連和軟件仍會限制實際表現。
AI 訓練與推理應怎樣選擇?
「訓練用 HBM、推理用 GDDR」只能作為常見配置描述,不能當成規則。大型訓練通常要讓多個加速器反覆讀取權重、梯度和中間結果,HBM 的高總頻寬與封裝密度較容易維持計算單元利用率。推理則要再分 prefill、decode、batch、模型大小、延遲目標和同時使用者數量;高吞吐或大型模型推理同樣可能高度依賴 HBM。
GDDR 較適合工作集能放入板載記憶體、所需總頻寬低於高階 HBM 平台、每台設備成本比最高吞吐更重要,而且板級功耗與散熱可以控制的系統。最終仍要以目標模型和服務級別實測,不能只按「訓練」或「推理」貼標籤。
Micron 的 AI 資料中心產品地圖同時列出 HBM、GDDR、DDR5/MRDIMM/SOCAMM 與資料中心 SSD,反映真實系統會按資料位置和工作負載分層,而不是由一種記憶體覆蓋全部任務。[5]
封裝與供應鏈怎樣改變經濟性?
HBM 的價值不只來自 DRAM 晶粒。多層堆疊需要 TSV、鍵合、base die、測試及與 GPU/ASIC 的先進封裝;任何一個環節的良率、認證或產能都會限制可交付數量。一個高價值裸晶或 stack 出現問題,也可能影響整個封裝的成本。
GDDR 以獨立封裝晶片裝在 PCB,供應與維修設計較模組化,但高速板級線路會消耗電力與電路板空間,總線擴大亦受到封裝引腳、控制器和散熱限制。它的系統成本較低並不等於任何容量或頻寬下都較便宜;應比較完成同一工作負載所需的設備數、功率、機架空間與利用率。
若要繼續研究 HBM 的 DRAM 晶粒、TSV、base die、CoWoS 類封裝和測試,可進入 HBM 供應鏈;此處則繼續聚焦 HBM 與 GDDR 的架構取捨。
投資者應追蹤哪些可驗證證據?
| 問題 | 應核對的證據 | 不能只看甚麼 |
|---|---|---|
| 新產品是否真正進入收入 | 客戶平台認證、合格出貨、公司分部或產品 mix | 送樣、產品發布或峰值規格 |
| HBM 優勢能否維持 | stack 良率、封裝產能、功耗、量產世代、客戶數 | 「AI 必須用 HBM」的市場口號 |
| GDDR 是否取得 AI 需求 | 具名加速器配置、部署規模、工作負載實測 | 官方列出「AI 應用」四個字 |
| 高售價能否成為股東現金 | 收入、毛利、存貨、應收、CFO、CapEx | ASP 或訂單單一指標 |
| 供應商誰真正受惠 | DRAM、封裝、base die、控制器與板卡各自收入證據 | 把整條供應鏈視為同一純度 |
Samsung、SK hynix 與 Micron 都參與 HBM/DRAM 競爭,但業務純度、證券結構和現金轉化不同;可在 記憶體三雄比較按同一證據層級繼續研究。
常見問題:HBM、GDDR 與 AI 顯示記憶體
HBM 和 GDDR 都算顯示記憶體嗎? 兩者都能成為 GPU/加速器的本地記憶體。「顯示記憶體」描述用途,不代表接口、封裝或系統成本相同;HBM 亦廣泛用於非圖形的 AI 與 HPC 計算。
HBM 一定比 GDDR 快嗎? 高階系統的 HBM 總頻寬通常更高,但必須固定產品與比較層級。GDDR 的單針速率可更高;實際應用速度還受容量、資料重用、控制器、互連和軟件影響。
GDDR7 可以用於 AI 推理嗎? 可以。官方產品定位已包括 AI 與高效能運算;是否合適要以模型工作集、吞吐、延遲、功耗、整機成本和部署數量驗證。
HBM、GDDR 和 DDR5 的位置有何不同? HBM 與 GDDR 多用作 GPU/加速器本地記憶體;DDR5 通常是 CPU/主機側系統記憶體。下一步可閱讀 HBM vs DDR5,把本地頻寬與主機容量放進同一資料流比較。
Klaro Research
資料來源與更新依據
資料截止:2026年9月2日
- [1] Samsung Semiconductor High Bandwidth Memory 產品與技術說明
第一方 · 原始資料 · 查閲:2026年9月2日
- [2] Samsung Semiconductor GDDR 產品與應用說明
第一方 · 原始資料 · 查閲:2026年9月2日
- [3] Samsung Semiconductor GDDR7 技術與應用說明
第一方 · 原始資料 · 查閲:2026年9月2日
- [4] AMD AMD CDNA 加速器架構與 HBM 配置
第一方 · 原始資料 · 查閲:2026年9月2日
- [5] Micron Technology AI 資料中心記憶體與儲存產品地圖
第一方 · 原始資料 · 查閲:2026年9月2日
研究限制
- 不同世代與系統配置的接口寬度、器件數量、容量和頻寬不同;本文比較架構取向,不建立跨所有產品通用的倍數。
- 廠商產品規格與內部測試只適用於其列明平台;工作負載是否受惠仍取決於模型、軟件、互連及整機配置。
需要重新檢查的事件
- JEDEC 或主要廠商公布新一代 HBM/GDDR 標準、量產規格或加速器配置,令比較邊界實質改變時更新。
- 主要 AI 平台由 HBM 轉向 GDDR、或由 GDDR 轉向 HBM,並出現可核對的產品與出貨證據時重核用途判斷。
本文僅供參考,不構成投資建議。