OpenAI 如何利用自家 LLM 設計其 Jalapeño 晶片
為何重要
這則新聞具體展示了 LLM 在硬體高階合成與軟體最佳化中的實戰價值,有望取代部分低階程式碼撰寫工作。OpenAI 展現垂直整合能力,若未來量產成功,將強化其對供應鏈的掌控,並推動硬體開發進入自動化託管的「協作模式」新時期。
OpenAI 於 8 月 25 日發布首款自研 AI 加速器「Jalapeño」,結合 compute die 與 HBM4,頻寬高達 15.4 TB/s,並利用內部 LLM 大幅縮短了設計流程。該晶片相較於其主力使用的 NVIDIA GB300,宣稱能將端對端延遲降低 3.6 倍。