AI之牆|推論成本降十倍,台灣電網卻還是舊設計

2026-09-28

每天精選 6 則要聞、一則產業名人訪談,五分鐘跟上。

五月十八日,黃仁勳在Dell Technologies World上台說了一句話:NVIDIA Vera Rubin NVL72的每個token推論成本,比上一代Blackwell低十倍。這句話的意思不是晶片變快了,而是原本因為太貴而不敢動的大規模AI部署,現在的帳算得過去了。需求曲線他自己形容是拋物線式暴增,徹底的拋物線。

這句話說出去四個月後,算力基礎設施的地面戰場已經面目全非。紐約州簽了全美第一個資料中心禁令,蘇格蘭準備凍結所有新建案,加州一口氣簽了七項管制法案。推論成本降了十倍,蓋資料中心的難度卻同步翻倍。這是同一條故事,不是兩條。

◎推論成本降十倍,電力帳卻沒跟著降

推論成本降十倍,台灣電網卻還是舊設計

黃仁勳那個十倍數字,讓很多人看到的是AI變便宜了。但便宜不代表需求縮小——恰恰相反,便宜讓原本算不過去的應用規模全部打開。Dell自己的調查說,67%的AI工作負載目前在雲端以外跑,88%的企業至少有一個AI專案部署在本地端。這不是口號,是基礎設施正在發生的遷移。

每個新增的本地端部署,都需要電。問題在這裡:NVIDIA Rubin世代的參考設計,機架密度已經超過100kW,GPU叢集在同步運算時會產生毫秒級的功率脈衝,傳統變壓器和柴油發電機的反應時間以秒計,根本吸收不了。維吉尼亞州Ashburn是全球最大資料中心集群,今年七月二十二日一條輸電線路故障,幾秒內讓超過3GW的負載脫離電網。兩年前同樣在維吉尼亞,一顆避雷器失效,60個設施,合計1,500MW同時斷電。

電網架構的問題不是電不夠,而是整套供電設計幾十年沒變:中壓電力進場,變壓器降壓,UPS調節,再送到機架。這套架構從來沒遇過AI資料中心這種負載——一個訓練園區可以在毫秒內讓用電量波動70%。傳統UPS電池只夠撐幾分鐘短暫停電,撐不住這種持續的功率震盪。推論成本降十倍,電力基礎設施卻還是十年前的設計,這個落差沒人要認帳。

◎五月的變電站試驗,和七月的電網事故,說的是同一件事

五月十九日,NVIDIA和美國非營利研究機構EPRI宣布一個名為分散式推論的試驗計畫:預計在2026年底前,在美國五家電力公司轄下的變電站旁,建約25座微型資料中心,每座5到20MW,以協調調度方式讓它們在邏輯上作為一個大型叢集運作。這個計畫的出發點,是一個長期被忽視的電網現實——美國5.5萬座變電站,每座平均有約5MW的閒置容量,因為規模太小,沒有傳統資料中心業者要投資。

NVIDIA和EPRI的盤算是:推論工作負載可以動態路由,哪裡有電,算力就往哪裡走。這對訓練叢集根本不可能——訓練需要數萬顆GPU緊密互連,不能拆散;但推論只處理單一用戶的請求,可以分散部署。這是推論和訓練最根本的物理差異,這個差異讓算力跟著電走第一次在技術上說得通。

然後到了七月,維吉尼亞州那次停電讓這個邏輯更清楚:集中部署越來越大,越密的資料中心,電網承受的同步衝擊只會越來越極端。單點集中的巨型設施在故障時,是一個3GW的負載瞬間脫網;分散在變電站旁的25座小節點,某一座斷電,整個叢集的調度系統把工作分流到其他節點,後果完全不同。五月的試驗計畫和七月的事故,說的是同一件事——AI算力需要和電網一起重新設計,不能繼續把舊電網當成不限量的插座。

◎接下來這條路怎麼走,以及對台灣的企業意味著什麼

EPRI的Ben Sooter說得很直接:第二波算力浪潮預計在2027年需求顯著放量,由大量處理推論需求的小型節點構成,不是現在這種5GW巨型設施的複製。這個預測和當前的地面事實完全吻合——Meta的路易斯安那州設施從2GW擴到5GW,軟銀要在法國蓋5GW,Blackstone宣布三到五年在日本投300億美元;同時,紐約州七月十四日正式簽署禁令,50MW以上新建案在美東拿不到環境許可,蘇格蘭在走相同的路,加州七月再加七項法案。

方向是清楚的:巨型資料中心的法規風險和社區阻力正在美國,英國,蘇格蘭同步升溫;分散式小型節點的政治阻力相對低,電網配合度更高,技術可行性已有NVIDIA背書。這兩個趨勢疊在一起,AI算力基礎設施的選址邏輯,五年內大概率從靠近大型電廠轉向靠近電網閒置容量。

對台灣的企業,這件事的意義不在於要不要蓋資料中心,而在於一個更基本的問題:台灣電網目前的架構,有沒有能力承接這種分散式推論節點的部署?台灣電力供應本來就是高度集中的系統,變電站閒置容量的分布和美國完全不同,NVIDIA和EPRI的方案能不能在台灣複製,是一個真實的基礎設施問題,而不是政策宣示能解決的。如果台灣的電網條件無法支撐分散式推論節點,台灣的企業在下一波AI基礎設施競賽裡,就只能靠著向外採購雲端推論算力維持競爭力,而這個算力的定價權,不在台灣手上。

我的判斷是:2027年以前,台灣不會有任何接近NVIDIA與EPRI分散式推論模式的實際部署;但同一時間,日本和新加坡已各自有明確的大規模投資在落地,亞太AI算力的地理格局會在這兩年快速定形,台灣在這張地圖上的位置,不取決於宣示,取決於電網。到2027年底,若台灣沒有任何規模在20MW以上的分散式推論節點實際動工,就意味著這輪基礎設施分配台灣缺席了。

我在這裡立一個可查驗的判斷:2027年底前,若台灣沒有任何規模在20MW以上,明確以分散式推論為定位的資料中心節點實際動工,台灣在這輪AI算力基礎設施的地理分配裡就是缺席的。Blackstone的錢去了日本,軟銀的錢去了法國,資本不等人。

電子報訂閱 ・ NEWSLETTER

看完今天的,讓明天的自己送上門

每天精選 6 則要聞、一則產業名人訪談,五分鐘跟上。

已出刊 135 期 ・ 隨時可退訂