Mu(微軟推出 Win11 設備端小型語言模型)

Mu是微軟推出 Win11 設備端小型語言模型，於2025年6月24日正式推出。

基本介紹

• 中文名：Mu
• 推出企業：微軟
• 運行設備：Win11 設備端
• 屬性：小型語言模型

簡介

Mu模型旨在為用戶提供更加智慧型和自然的語言互動體驗，進一步最佳化系統設定中的搜尋功能。

Mu 是一款擁有 3.3 億參數的編碼器 - 解碼器語言模型。與同尺寸的解碼器模型相比，編碼器 - 解碼器架構能夠將首 token 延遲降低約 47%，並將解碼速度提高 4.7 倍。Mu 在某些組件中採用了權重共享技術，以減少總參數數量。微軟利用 NVIDIA A100 GPU 在 Azure 機器學習平台上對 Mu 進行了訓練。儘管 Mu 的尺寸僅為 Phi - 3.5 - mini 的十分之一，但其性能幾乎與經過類似微調的 Phi - 3.5 - mini 相當。此外，該模型更適合處理多詞查詢。對於短詞或部分詞輸入，系統設定套用仍會在搜尋框中顯示辭彙和語義搜尋結果。

發展歷史

2025年6月24日，微軟正式推出Mu。