清晨重磅!阿里發佈並開源Qwen3,無縫集成思考模式、多語言、便於Agent調用

市場資訊
04-29

阿里巴巴週一發佈並開源通義千問3.0(Qwen3)系列模型,並稱其在數學和編程等多個方面均可與DeepSeek的性能相媲美。與其他主流模型相比,Qwen3還顯著降低了部署成本。阿里表示,Qwen3無縫集成兩種思考模式,支持119種語言,便於Agent調用。

性能媲美DeepSeek R1、OpenAI o1,全部開源

Qwen3系列包括兩個專家混合 (MoE) 模型和另外六個模型。阿里巴巴表示,最新發型的旗艦模型Qwen3-235B-A22B在代碼、數學、通用能力等基準測試中,與DeepSeek-R1、o1、o3-mini、Grok-3和Gemini-2.5-Pro等頂級模型相比,表現出極具競爭力。

此外,被稱爲“專家混合”(MoE,Mixture-of-Experts)模型的Qwen3-30B-A3B的激活參數數量是QwQ-32B的10%,表現更勝一籌,甚至像Qwen3-4B這樣的小模型也能匹敵Qwen2.5-72B-Instruct的性能。這類系統模擬人類解決問題的思維方式,將任務劃分爲更小的數據集,類似於讓一組各有所長的專家分別負責不同部分,從而提升整體效率。

同時,阿里巴巴還開源了兩個MoE模型的權重:擁有2350多億總參數和220多億激活參數的Qwen3-235B-A22B,以及擁有約300億總參數和30億激活參數的小型MoE 模型Qwen3-30B-A3B。此外,六個Dense模型也已開源,包括Qwen3-32B、Qwen3-14B、Qwen3-8B、Qwen3-4B、Qwen3-1.7B和Qwen3-0.6B,均在Apache 2.0許可下開源。

“混合型”模型,兩種思考模式

阿里巴巴表示,Qwen 3系列是“混合型”模型,既可以花時間“推理”以解決複雜問題,也可以快速回答簡單請求,分別叫做“思考模式”和“非思考模式”。“思考模式”中的推理能力使得模型能夠有效地進行自我事實覈查,類似於OpenAI的o3模型,但代價是推理過程中的延遲時間較高。

Qwen團隊在博客文章中寫道:

這種靈活性使用戶能夠根據具體任務控制模型進行“思考”的程度。例如,複雜的問題可以通過擴展推理步驟來解決,而簡單的問題則可以直接快速作答,無需延遲。

至關重要的是,這兩種模式的結合大大增強了模型實現穩定且高效的“思考預算”控制能力。如上文所述,Qwen3展現出可擴展且平滑的性能提升,這與分配的計算推理預算直接相關。

這樣的設計讓用戶能夠更輕鬆地爲不同任務配置特定的預算,在成本效益和推理質量之間實現更優的平衡。

訓練數據量是Qwen2.5的兩倍,便於Agent調用

阿里巴巴表示,Qwen3系列支持119種語言,並基於近36萬億個token(標記)進行訓練,使用的數據量是Qwen2.5的兩倍。Token是模型處理的基本數據單元,約100萬個token相當於75萬英文單詞。阿里巴巴稱,Qwen3的訓練數據包括教材、問答對、代碼片段等多種內容。

據介紹,Qwen3預訓練過程分爲三個階段。在第一階段(S1),模型在超過30萬億個token上進行了預訓練,上下文長度爲4K token。這一階段爲模型提供了基本的語言技能和通用知識。

在第二階段(S2),訓練則通過增加知識密集型數據(如 STEM、編程和推理任務)的比例來改進數據集,隨後模型又在額外的5萬億個token上進行了預訓練。在最後階段則使用高質量的長上下文數據將上下文長度擴展到32K token,確保模型能夠有效地處理更長的輸入。

阿里巴巴表示,由於模型架構的改進、訓練數據的增加以及更有效的訓練方法,Qwen3 Dense基礎模型的整體性能與參數更多的Qwen2.5基礎模型相當。例如,Qwen3-1.7B/4B/8B/14B/32B-Base分別與Qwen2.5-3B/7B/14B/32B/72B-Base 表現相當。特別是在 STEM、編碼和推理等領域,Qwen3 Dense基礎模型的表現甚至超過了更大規模的Qwen2.5 模型。對於Qwen3 MoE基礎模型,它們在僅使用10%激活參數的情況下達到了與Qwen2.5 Dense基礎模型相似的性能,顯著節省了訓練和推理成本。

而在後訓練階段,阿里使用多樣的的長思維鏈數據對模型進行了微調,涵蓋了數學、代碼、邏輯推理和 STEM 問題等多種任務和領域,爲模型配備基本的推理能力。然後通過大規模強化學習,利用基於規則的獎勵來增強模型的探索和鑽研能力。

阿里巴巴表示,Qwen3在調用工具(tool-calling)、執行指令以及複製特定數據格式等能力方面表現出色,推薦用戶使用Qwen-Agent來充分發揮Qwen3的Agent能力。Qwen-Agent內部封裝了工具調用模板和工具調用解析器,大大降低了代碼複雜性。

除了提供下載版本外,Qwen3還可以通過Fireworks AI、Hyperbolic等雲服務提供商使用。

目標仍對準AGI

OpenAI、谷歌和Anthropic近期也陸續推出了多款新模型。OpenAI近日表示,也計劃在未來幾個月發佈一款更加“開放”的模型,模仿人類推理方式,這標誌着其策略出現轉變,此前DeepSeek和阿里巴巴已經率先推出了開源AI系統。

目前,阿里巴巴正以Qwen爲核心,構建其AI版圖。今年2月,首席執行官吳泳銘表示,公司目前的“首要目標”是實現通用人工智能(AGI)——即打造具備人類智力水平的AI系統。

阿里表示,Qwen3代表了該公司在通往通用人工智能(AGI)和超級人工智能(ASI)旅程中的一個重要里程碑。展望未來,阿里計劃從多個維度提升模型,包括優化模型架構和訓練方法,以實現幾個關鍵目標:擴展數據規模、增加模型大小、延長上下文長度、拓寬模態範圍,並利用環境反饋推進強化學習以進行長週期推理。

開源社區振奮

阿里Qwen3的發佈讓AI社區感到激動,有網友獻上經典Meme:

有網友說,

在我的測試中,235B在高維張量運算方面的表現相當於Sonnet。

這是一個非常出色的模型,

感謝你們。

有網友對Qwen3讚不絕口:

如果不是親眼看到屏幕上實時生成的tokens,我根本不會相信那些基準測試結果。???? 簡直像魔法一樣????

而開源AI的支持者則更加興奮。有網友說:

“有了一個開源32B大模型,性能跟Gemini 2.5 Pro不相上下。”

“我們徹底殺回來了!”

網友感謝阿里積極推動開源:

免責聲明:投資有風險,本文並非投資建議,以上內容不應被視為任何金融產品的購買或出售要約、建議或邀請,作者或其他用戶的任何相關討論、評論或帖子也不應被視為此類內容。本文僅供一般參考,不考慮您的個人投資目標、財務狀況或需求。TTM對信息的準確性和完整性不承擔任何責任或保證,投資者應自行研究並在投資前尋求專業建議。

熱議股票

  1. 1
     
     
     
     
  2. 2
     
     
     
     
  3. 3
     
     
     
     
  4. 4
     
     
     
     
  5. 5
     
     
     
     
  6. 6
     
     
     
     
  7. 7
     
     
     
     
  8. 8
     
     
     
     
  9. 9
     
     
     
     
  10. 10