清華團隊開源 “赤兔 Chitu” 推理引擎,助力國產 AI 生態發展
近日,清華大學高性能計算研究所的翟季冬教授團隊與清華系科創企業清程極智聯合發佈了一個激動人心的消息 —— 開源大模型推理引擎 “赤兔 Chitu”。這一創新性技術的推出,標誌着國內在 AI 領域的又一重要突破,尤其是在推理引擎的開發上。“赤兔 Chitu” 引擎的核心亮點在於其能夠在非英偉達 Hopper 架構的 GPU 和各類國產芯片上,原生運行 FP8精度模型。這意味着,無論是依賴於進口芯片還是國產芯片,開發者都能利用這一推理引擎實現高效的 AI 模型推理。這一進展不僅推動了國產