YSK News

標籤 #MoE

共 5 篇文章

Telegram RSS
MiniMax/官方:M3.1 Flash 開源權重上線——約四二八〇億參數 MoE、一百萬 token 上下文;支援 vLLM/SGLang

MiniMax/官方:M3.1 Flash 開源權重上線——約四二八〇億參數 MoE、一百萬 token 上下文;支援 vLLM/SGLang

MiniMax 於二〇二六年十月二十三日在 Hugging Face 公開 MiniMax-M3.1-Flash 模型權重:原生多模態混合專家架構,總參數約四千二百八十億、每 token 啟動約二百三十億,支援文字、圖像與影片輸入及最高約一百萬 token 上下文。官方模型卡列明可用 SGLang、vLLM、Token...

Recursive/官方:推出 Flint 本地代理式編碼 MoE——四百億參數僅啟用二十五億;M4 Pro 逾一百二十五 token/秒;Apache 2.0

Recursive/官方:推出 Flint 本地代理式編碼 MoE——四百億參數僅啟用二十五億;M4 Pro 逾一百二十五 token/秒;Apache 2.0

Recursive Superintelligence 於二〇二六年十月二十一日前後在官方更新頁宣布推出 Recursive Flint:一款面向本地硬體的專家混合(MoE)代理式編碼模型,總參數約四百億、每個 token 僅啟用約二十五億參數;官方稱以自研 Eureka Machine 自動化研發系統協助,由小型團隊...

螞蟻/inclusionAI:開源 Ling-3.1-flash——五百六十億總參數、二十五億激活、MIT 授權;百萬 token 上下文並支援 SGLang/vLLM

螞蟻/inclusionAI:開源 Ling-3.1-flash——五百六十億總參數、二十五億激活、MIT 授權;百萬 token 上下文並支援 SGLang/vLLM

螞蟻集團旗下 inclusionAI 已在 Hugging Face 以 MIT 授權公開 Ling-3.1-flash 模型權重,供開發者自行下載與部署。模型卡標示總參數約五百六十億、每 token 激活約二十五億,並宣稱支援長達一百萬 token 的上下文窗口,部署路徑涵蓋 SGLang 與 vLLM。來源真實性已...

Ai2/Hugging Face/官方:推出 Olmo-core 3——開源可擴至萬億參數級 MoE 訓練基建;專家池八至一百二十八、吞吐降幅少於百分之五;八卡 B300 約二點七倍吞吐

Ai2/Hugging Face/官方:推出 Olmo-core 3——開源可擴至萬億參數級 MoE 訓練基建;專家池八至一百二十八、吞吐降幅少於百分之五;八卡 B300 約二點七倍吞吐

Allen Institute for AI(Ai2)於二零二六年十月一日透過 Hugging Face 官方部落格發布 Olmo-core 3,把開源大型語言模型訓練框架升級為可擴至萬億參數級的 Mixture-of-Experts(MoE)訓練系統。官方基準顯示,專家池由八擴至一百二十八、總參數由約四十六億增至約四...