本文概述了AI推理芯片領域的最新發展,特別是MLPerf推理v4.1競賽的結果,該競賽彙集了來自AMD、谷歌、UntetherAI、Cerebras、FuriosaAI以及Nvidia等公司的最新芯片。Nvidia的H200和GH200芯片在“數據中心封閉”類別中保持領先,但其他公司的芯片在特定任務上表現出色,尤其是在能效方面。AMD的Instinct加速器、谷歌的Trillium加速器以及UntetherAI的speedAI240預覽芯片在不同任務上表現出色,顯示了市場上的競爭激烈。UntetherAI的芯片採用內存計算方法,顯示出在能效和延遲方面有顯著優勢。Cerebras和FuriosaAI雖然沒有參加MLPerf,但也發佈了新芯片,分別展示了其在內存帶寬和張量收縮處理器方面的創新。IBM的Spyre芯片則爲即將到來的市場增添了新的競爭者。整體而言,AI推理芯片市場的競爭日益激烈,創新技術不斷涌現,旨在提高性能、能效和成本效益。
["OpenAICEO 薩姆・奧特曼近日再次爲一家人工智能芯片企業籌集了數十億美元的資金,希望建立一個範圍覆蓋全球的晶圓廠「企業網絡」,並計劃與未具名的頂級芯片製造商合作。","奧特曼已與幾家大型潛在投資者進行了談判,希望能籌集到晶圓廠所需的鉅額資金。","面向生成式 AI 的計算,英偉達已經發布了下一代 GH200GraceHopper 芯片,以擴大其在該領域的主導地位競爭對手 AMD、高通和英特爾也推出了旨在爲筆記本電腦、手機和其他設備上運行的人工智能模型提供支持的處理器。"]
["AWS將首次引入NVIDIA GH200 Grace Hopper Superchips,提供規模化的雲上AI計算。","合作包括在AWS上託管首個搭載GH200 NVL32的NVIDIA DGX Cloud,加速生成式AI和語言模型訓練。","推出新的Amazon EC2實例,包括用於生成式AI的P5e實例和適用於各種應用的G6、G6e實例。","合作涉及軟件開發,包括NVIDIA NeMo Retriever和BioNeMo,提供聊天機器人和藥物發現模型訓練工具。"]
["英偉達CEO黃仁勳將參加10月18日鴻海科技日活動,與鴻海董事長劉揚偉共同亮相。","鴻海獲得英偉達AI芯片GH200和L40/L40S芯片模塊獨家供應權。","鴻海具備從模塊到整個數據中心全產業鏈優勢,是英偉達完整解決方案的唯一製造商。","鴻海獲得英偉達車載產品一級供應商資格,合作進軍汽車電子市場。","英偉達AI峯會因以色列局勢不穩取消,轉爲線上形式仍未確定。"]