人工智能應(yīng)用的異構(gòu)集成技術(shù)

逍遙設(shè)計(jì)自動(dòng)化

新一代人工智能硬件架構(gòu)：突破傳統(tǒng)計(jì)算范式
人工智能（AI）的快速發(fā)展催生了對(duì)計(jì)算能力的巨大需求。由于傳統(tǒng)晶體管縮放方法難以滿足這種指數(shù)級(jí)增長(zhǎng)的需求，半導(dǎo)體行業(yè)已轉(zhuǎn)向系統(tǒng)級(jí)縮放方法，特別是異構(gòu)集成（HI）技術(shù)。本文探討了當(dāng)前異構(gòu)集成技術(shù)的現(xiàn)狀及其在支持下一代人工智能系統(tǒng)中的核色[1]。

1 K# h/ B9 D  `2 G5 c, O
* d- U6 a( ^, q) O, f3 P集成技術(shù)的演進(jìn)：從2D到3D解決方案
+ V7 d* J4 |' Q5 k
圖1：當(dāng)前異構(gòu)集成技術(shù)概述，展示了各種架構(gòu)，包括2.5D/2D增強(qiáng)型、3D架構(gòu)以及多芯片模塊、晶圓級(jí)扇出和玻璃核心封裝等不同集成方式。
/ W  m, [" g( z
4 T) a% P* w' _異構(gòu)集成在實(shí)現(xiàn)人工智能應(yīng)用的高系統(tǒng)吞吐量和能效方面發(fā)揮著關(guān)鍵作用。通過將片上系統(tǒng)（SoC）分割成多個(gè)chiplet并將其集成到單個(gè)封裝中，設(shè)計(jì)人員可以顯著提高系統(tǒng)靈活性、功能性、帶寬、吞吐量和延遲性能。這種方法通過橫向、縱向或雙向方式使chiplet更緊密地集成，實(shí)現(xiàn)在單個(gè)封裝中集成更多內(nèi)存或邏輯電路。
. s+ ~1 L" |5 M
/ ]& }$ Z0 F6 n7 _& }* h; |架構(gòu)轉(zhuǎn)型：多裸片集成的興起
+ S5 {% J0 x& j9 H& o8 t( Z$ l$ V
$ Q# P& e8 [. C圖2：集成架構(gòu)比較，展示了(a)傳統(tǒng)2D SoC、(b)基于3D-TSV的架構(gòu)、(c)中介層架構(gòu)和(d)組合架構(gòu)，演示了邏輯和內(nèi)存組件集成方法的演進(jìn)。
& D0 u7 b5 `% N  A
當(dāng)前的異構(gòu)集成技術(shù)包括多個(gè)方向，包括多芯片模塊（MCM）、中介層架構(gòu)、晶圓級(jí)封裝和3D架構(gòu)。MCM是最早的多裸片2D架構(gòu)之一，將chiplet橫向放置在有機(jī)基板上，以減少布線長(zhǎng)度并提高封裝帶寬。然而，由于采用傳統(tǒng)有機(jī)基板和粗糙的焊料鍵合技術(shù)，MCM在互連密度方面存在限制。
8 K9 z* _  X4 \" b
: \& o9 {2 W/ J先進(jìn)封裝創(chuàng)新：3D-ICE技術(shù)
; r0 O8 n! B9 o( M
; G2 @0 B7 _( i2 q% u7 q, b圖3：3D集成chiplet封裝（3D-ICE）技術(shù)概述，展示了使用二氧化硅封裝的chiplet集成創(chuàng)新方法。

業(yè)界在開發(fā)人工智能應(yīng)用的先進(jìn)封裝解決方案方面取得了重大進(jìn)展。Cerebras、Nvidia、AMD、Intel和Tesla等公司已部署了專門為人工智能工作負(fù)載設(shè)計(jì)的各種異構(gòu)集成架構(gòu)。例如，Cerebras的WSE-3使用臺(tái)積電5nm技術(shù)的晶圓級(jí)集成，實(shí)現(xiàn)了人工智能訓(xùn)練的強(qiáng)大計(jì)算能力。Nvidia的GB200 Grace Blackwell芯片采用臺(tái)積電的芯片級(jí)晶圓級(jí)基板（CoWoS-L）封裝技術(shù)，支持處理超過10萬億參數(shù)的大型語言模型。
$ p. Y5 d8 v1 N% a# U! p& v
標(biāo)準(zhǔn)化和連接：協(xié)議集成的優(yōu)勢(shì)
+ b1 ^8 u7 s$ x- _& q' g- H9 W+ k: u$ j
1 P- z2 j' |4 G1 M1 B6 G0 S圖4：異構(gòu)計(jì)算的標(biāo)準(zhǔn)化協(xié)議示意圖，展示了現(xiàn)代人工智能系統(tǒng)中使用的各種互連標(biāo)準(zhǔn)。
( m2 C' E, s* i8 e+ @5 g4 v3 V
% d  ^! `2 U2 v2 X# n6 \5 U* z裸片間（D2D）接口在異構(gòu)系統(tǒng)組件之間的數(shù)據(jù)傳輸中扮演著重要角色。AMD的Infinity Fabric、Intel的Advanced Interface Bus（AIB）和Universal Chiplet Interconnect Express（UCIe）協(xié)議等行業(yè)標(biāo)準(zhǔn)實(shí)現(xiàn)了chiplet之間的高效通信。這些接口對(duì)于實(shí)現(xiàn)現(xiàn)代人工智能應(yīng)用所需的高帶寬和低延遲性能具有重要意義。
3 N) a0 i# l8 b$ i
未來方向之一的玻璃封裝

圖5：Intel組裝的玻璃基板測(cè)試芯片(a)和Absolics的面板級(jí)封裝玻璃基板(b)示例，展示了玻璃封裝技術(shù)的最新進(jìn)展。

+ ~0 k6 t+ `/ r7 P- X6 ~玻璃核心封裝已成為下一代人工智能系統(tǒng)的重要解決方案。玻璃基板具有多項(xiàng)優(yōu)勢(shì)，包括優(yōu)異的信號(hào)完整性、支持高密度互連以及改進(jìn)的熱管理能力。Intel和Absolics等公司最近的發(fā)展表明了業(yè)界對(duì)高性能人工智能應(yīng)用玻璃基解決方案的重視。
' X8 ~/ g/ c' V' T* Y
向異構(gòu)集成的轉(zhuǎn)變代表了人工智能硬件架構(gòu)方法的變革。隨著人工智能模型規(guī)模和復(fù)雜性的持續(xù)增長(zhǎng)，業(yè)界對(duì)先進(jìn)封裝技術(shù)和新型集成方法的關(guān)注將在滿足未來人工智能應(yīng)用的計(jì)算需求方面發(fā)揮重要作用。

5 x5 G+ c8 x1 L4 t* E參考文獻(xiàn)
[1] M. Manley, A. Victor, H. Park, A. Kaul, M. Kathaperumal, and M. S. Bakir, "Heterogeneous Integration Technologies for Artificial Intelligence Applications," IEEE Journal on Exploratory Solid-State Computational Devices and Circuits, 2024, doi: 10.1109/JXCDC.2024.3484958.
" u' S6 [" a, {7 F# y/ KEND


% J$ u2 P% H3 f/ M6 J: q5 T8 u軟件申請(qǐng)我們歡迎化合物/硅基光電子芯片的研究人員和工程師申請(qǐng)?bào)w驗(yàn)免費(fèi)版PIC Studio軟件。無論是研究還是商業(yè)應(yīng)用，PIC Studio都可提升您的工作效能。
+ c6 A5 V( p3 H6 \8 e點(diǎn)擊左下角"閱讀原文"馬上申請(qǐng)

歡迎轉(zhuǎn)載
& s0 _  d3 I8 `
轉(zhuǎn)載請(qǐng)注明出處，請(qǐng)勿修改內(nèi)容和刪除作者信息！


  l4 u7 j- |) @  D9 {( X
4 B7 \3 m% i9 O. t* u/ D3 R" X$ [
+ ~, Z  i% M. u) |" i% J" S, Y
4 q/ u9 v. B0 D關(guān)注我們
' [! m- ]) x9 c. q
: d( Z9 U: \  ?" U& s8 i1 X

5 G7 C7 ]9 I. f% d, [. S

7 L* i9 _7 ^" b; l, R3 s

                     
9 x. i7 [1 A, M& q, d7 ?
* u$ k! i3 Z8 n  o* v

& \* d" }. q9 U# P2 f6 p關(guān)于我們：
深圳逍遙科技有限公司（Latitude Design Automation Inc.）是一家專注于半導(dǎo)體芯片設(shè)計(jì)自動(dòng)化（EDA）的高科技軟件公司。我們自主開發(fā)特色工藝芯片設(shè)計(jì)和仿真軟件，提供成熟的設(shè)計(jì)解決方案如PIC Studio、MEMS Studio和Meta Studio，分別針對(duì)光電芯片、微機(jī)電系統(tǒng)、超透鏡的設(shè)計(jì)與仿真。我們提供特色工藝的半導(dǎo)體芯片集成電路版圖、IP和PDK工程服務(wù)，廣泛服務(wù)于光通訊、光計(jì)算、光量子通信和微納光子器件領(lǐng)域的頭部客戶。逍遙科技與國(guó)內(nèi)外晶圓代工廠及硅光/MEMS中試線合作，推動(dòng)特色工藝半導(dǎo)體產(chǎn)業(yè)鏈發(fā)展，致力于為客戶提供前沿技術(shù)與服務(wù)。

http://www.latitudeda.com/
+ e9 P: W2 G& S（點(diǎn)擊上方名片關(guān)注我們，發(fā)現(xiàn)更多精彩內(nèi)容）