研發背景
旗艦模型Qwen3-235B-A22B的研發旨在對標並超越
OpenAI o3-mini、谷歌Gemini 2.5 Pro等國際頂尖大語言模型,其在多項基準測試中展現出強勁競爭力。
模型名稱“Qwen3-235B-A22B”中,“Qwen”是阿里巴巴通義千問的英文標識,“3”代表該模型屬於千問系列的第3代版本,“235B”指總參數量為2350億,“A22B”通常與模型架構、訓練配置或硬體適配相關。
該模型在預訓練階段使用了涵蓋書籍、代碼庫等多種類型的36T tokens數據集;後訓練通過多輪強化學習,整合了非思考與思考模型,以最佳化綜合性能。
發展歷程
2025年7月22日,阿里通義千問團隊更新旗艦版Qwen3模型,推出非思考模式(Non-thinking)版本Qwen3-235B-A22B-Instruct-2507-FP8。該版本在指令遵循、邏輯推理、數學、編程等多方面能力顯著提升,並將長文本上下文支持提升至256K。
2026年2月25日,阿里發布
千問3.5系列新模型。新模型性能超越了上代旗艦模型Qwen3-235B-A22B。
核心技術
Qwen3-235B-A22B採用混合專家架構,總參數量為2350億,激活參數量為220億。該模型包含94層,注意力頭配置為Q 64、KV 4,擁有128個專家,每次激活其中8個專家。
模型採用動態混合推理框架,支持在消費級硬體如
RTX 4090顯示卡或蘋果M3晶片上運行。該框架允許用戶在同一模型內切換“思考模式”與“非思考模式”。
在多項評測中,Qwen3-235B-A22B在數學推理的AIME25測評中得分81.5,在代碼生成的LiveCodeBench評測中得分70.7。其在人類偏好對齊的ArenaHard評測中獲得95.6分,在Agent能力的BFCL評測中獲得70.8分。
Qwen3-235B-A22B支持文本、圖像、音頻、視頻的統一處理與理解。
模型本機支持32768個token的上下文視窗,並可通過YaRN方法擴展至131072個token或256K token。
其部署需使用4張H20顯示卡。
運營模式
核心團隊
Qwen3-235B-A22B由阿里巴巴通義千問團隊研發。該團隊在開源大模型領域貢獻顯著,已發布包含Qwen3在內的Qwen系列多代模型。
據官方信息,截至2025年4月,基於Qwen系列的開源衍生模型已超過10萬個,全球下載量超3億次。團隊通過技術最佳化,顯著降低了模型的部署門檻,例如,其旗艦模型Qwen3-235B-A22B僅需4張H20顯示卡即可部署。
重要事件
Qwen3-235B-A22B自2025年發布後,經歷了多次重要更新與評測,以下為關鍵事件記錄。
2025年4月29日,阿里巴巴正式發布並開源Qwen3系列模型,其旗艦模型Qwen3-235B-A22B同步亮相。該模型採用混合專家(MoE)架構,總參數量達2350億,激活參數為220億,支持119種語言,並首次引入可切換的混合推理模式(思考/非思考模式)。
2025年5月,官方技術報告公開,顯示Qwen3-235B-A22B於5月6日登頂國際權威大模型測評榜LiveBench開源大模型性能榜首,並在數學(AIME25得分81.5)、代碼生成(LiveCodeBench 70.7分)等多項核心評測中超越DeepSeek-R1、Grok-3等頂尖模型。
2025年7月22日,
阿里雲對旗艦模型進行重要更新,推出了Qwen3-235B-A22B-Instruct-2507-FP8(非思考模式)版本。此次更新顯著提升了模型的通用能力,長文本上下文視窗擴展至256K,並在GQPA、AIME25、LiveCodeBench等多個測評中表現超越Kimi-K2、
DeepSeek-V3等模型。新模型已在
魔搭社區和
HuggingFace上開源。