Meta AI推出MILS系統 教導 LLMs無需專門培訓即可處理多媒體數據

Meta AI的研究人員與學術夥伴共同開發了一種創新系統——MILS（多模態迭代LLM求解器），該系統能在無需經過專門訓練的情況下，教大型語言模型處理圖像、視頻和音頻。MILS依賴於語言模型的自然問題解決能力，而非大量的數據訓練，展現了其獨特的優勢。MILS的工作原理是通過將兩個AI模型配對來進行任務解決:一個是“生成器”，負責提出任務解決方案，另一個是“評分器”，用來評估生成方案的效果。評分器提供的反饋可以幫助生成器不斷優化答案，直到達到令人滿意的結果。舉例來說