IBM 於二零二六年十月二十一日在 Hugging Face 發布 Granite Speech 5.0 系列更新:新模型 granite-speech-5.0-2b 強化多語自動語音辨識與英雙向翻譯,關鍵字偏置可達二千詞;高速版 Turbo CTC 改為多語並稱推理約快一點六倍;會議向 granite-speech-4.1-2b-plus 改善說話人歸因與時間戳。本文已核對 Hugging Face 官方網誌與模型卡要點,來源真實性已驗證。
IBM/Hugging Face/官方:Granite Speech 5.0——多語轉寫翻譯更準更快;Turbo CTC 約一點六倍速;會議說話人歸因升級
企業會議、客服通話與跨境錄音要同時做到「聽得準、譯得穩、分得出誰在說」,往往要拼湊多個專用模型。IBM Research 這次把 Granite Speech 收成三條可選路徑:高準確度多語轉寫/翻譯、邊緣高速轉寫,以及多說話人會議歸因,全部以 Apache 2.0 釋出,並支援 Transformers、vLLM、llama.cpp 與 mlx-audio 等常見部署棧。
一、核心事件:三條語音產線同日更新
根據 Hugging Face 網誌《Granite Speech 5.0: Transcribe, Translate, and Attribute more Accurately and Faster》(二零二六年十月二十一日,IBM Research 團隊)及相關模型卡:
- granite-speech-5.0-2b(新):接替同參數量的 4.1-2b。支援英語、法語、德語、西班牙語、葡萄牙語與日語轉寫;可與英語雙向翻譯(另含英語至意大利語、普通話方向)。訓練數據官方寫明約三十九萬小時公開音訊,另加為日語 ASR、關鍵字偏置與翻譯建構的合成數據。
- granite-speech-5.0-470m-turboctc(更新):維持約四億七千萬參數的高速編碼器路線,由英語為主擴至多語(英、日、西、德、法、意、葡),原生標點與大小寫,並加強混響/遠場魯棒性。
- granite-speech-4.1-2b-plus(權重更新):架構、提示格式與 API 不變,屬可替換權重的會議/多說話人路線;官方強調改善說話人歸因、時間戳、長語音與關鍵字偏置。
官方建議選型:要準確度、翻譯或關鍵字偏置 → 5.0-2b;要吞吐或裝置端 → Turbo CTC;要會議「誰在何時說了甚麼」→ 4.1-2b-plus。生產環境建議搭配 Granite Guardian 做風險偵測。
二、技術細節與官方數字
granite-speech-5.0-2b
相對 4.1-2b,官方列舉:英語短語基準更準、噪音/混響/遠場表現更好;可用語言識別提示引導多語轉寫;長篇與對話翻譯更穩;關鍵字列表可達二千詞;可按提示要求輸出標點與大小寫(官方測試集 capitalization F1 約 89.7 至 99.5)。於 Open ASR Leaderboard 公開英語短語測試集平均字錯誤率(WER),官方截至二零二六年十月二十一日快照稱其在頂尖開源權重 ASR 中平均英語 WER 約 5.06%、列約第二(越低越好)。
Turbo CTC 速度
官方指透過編譯單一 Conformer 區塊並在堆疊中重用計算圖,縮短暖機時間;於 Open ASR Leaderboard 報導 19,870 RTFx,相對發布初期約 12,600 RTFx 約為 1.6 倍速度,並稱準確率水平相若。RTFx 為相對實時倍數,越高代表同等時長音訊可用更少運算時間處理。
4.1-2b-plus 會議指標(越低越好)
| 能力 | 指標 | 舊版 | 更新版 |
|---|---|---|---|
| 時間戳(全部語音) | AAS 平均時間戳偏移 | 210.86 | 98.54 |
| 時間戳(短語音) | AAS | 29.27 | 26.20 |
| 關鍵字偏置(二十詞列表) | 偏置詞 WER | 11.79 | 6.48 |
| 長語音 | 長語音測試集 WER | 13.53 | 10.22 |
| 說話人歸因 | WDER | 4.40 | 4.10 |
| 說話人歸因轉寫 | cpWER | 30.50 | 28.48 |
官方解讀:平均時間戳偏移減逾一半;二十詞關鍵字列表上偏置詞錯誤約降百分之四十五;長語音 WER 約降百分之二十四;WDER 與 cpWER 各約降百分之七。細項見模型卡。
三、與近期 Granite/語音敘事的區隔
本站同日稍早已報道 Granite Timeseries Ensemble R1(時序預測集成),屬時序產線;十月十六日 Granite Switch 4.1 則把對話/決策/語音收在同一端點敘事。本次是 Speech 專線的 5.0/Turbo/Plus 權重更新,模型卡、基準與使用場景均不同,不宜視為同一事件的重複報道。亦有別於近日 Block Dessa(純語音訓練對話模型)或 Mistral Voxtral 3(語音智能體 SDK)——供應商與產品形態均不同。
四、日常應用場景(含香港視角)
1. 開發者與技術團隊
可先在隔離環境用 Transformers/vLLM 驗證短音訊與長會議樣本,量度 WER、延遲與 GPU/Apple Silicon(mlx-audio)成本;把二千詞關鍵字表對接產品名、人名與內部縮寫詞庫。Turbo CTC 適合批量歸檔或瀏覽器/邊緣串流原型;會議線應保留說話人標籤與時間戳以便搜尋與合規覆核。
2. 企業與隱私敏感行業
法務、金融、醫療與客服中心常用粵語/英語/普通話混雜錄音。Granite Speech 的開源權重有利於境內或專有雲私有部署,減少把通話原文送出公用 SaaS。惟模型卡語言清單以歐語與日語為主、未把粵語列為官方支援語言——香港團隊若要處理廣東話,仍須另做方言微調、路由至粵語專模,或只把英語/普通話/日語等已列語言段落交給 Granite。關鍵字偏置可降低品牌名、客戶代號被聽錯的營運成本。
3. 一般用戶與內容團隊
字幕、訪談整理、多語摘要可先用 5.0-2b 產出草稿再人工校對;勿把自動轉寫直接當具法律效力的會議紀錄。時間戳收緊後,較易對齊影片剪輯與重點回放。
4. 香港與亞洲市場視角
粵港澳大灣區企業跨境會議、日資/歐資在港據點的多語合規存檔,以及旅遊零售客服錄音,都需要「可私有化、可稽核、可偏置詞表」的 ASR。香港若把語音管線與企業私有大語言模型串起,可在本地完成「轉寫 → 摘要 → 工單」而不必把音訊原文出境;這與金管局/證監會對客戶錄音與數據跨境的關注方向一致,但仍須各自做私隱影響評估。
五、專業評價與潛在考量
優勢
- 一手來源完整:網誌日期、三模型定位表、Open ASR 快照表述與 Plus 指標表可互相對照。
- 產品分層清楚:準確度/速度/會議歸因三條路徑,降低「一個模型打天下」的選型摩擦。
- Apache 2.0 與主流推論棧支援,有利企業內網與供應商鎖定評估。
- 關鍵字偏置上限二千詞、會議時間戳顯著收緊,直接對應客服與合規場景痛點。
需要留意的地方
- Open ASR 排名會隨榜單更新變動;英語短語平均 WER 不能外推到粵語或嚴重口音場景。
- 官方語言清單未涵蓋粵語;香港落地需另補方言策略。
- Turbo CTC 強調吞吐,會議級說話人歸因仍應走 Plus 路線,勿混用期望。
- 自動轉寫錯誤在金融下單、醫療指示等場景可造成營運風險,必須保留人類覆核與抽樣稽核。
- 「搭配 Granite Guardian」是官方建議,不等於開箱即符合行業模型管治要求。
結語
Granite Speech 5.0 把企業語音工作收成可安裝的三條開源路徑:要準用 2B,要快用 Turbo CTC,要分說話人用 Plus 更新權重。對香港團隊而言,價值在於用可私有部署的權重縮短「錄音 → 可搜尋文本/字幕」的周期,並用詞表偏置降低專有名詞錯誤。若機構需要在香港把語音轉寫、會議智能與私有大語言模型串成端到端工作流,可參考 YSK Limited 的人工智能自動化與企業私有 LLM 全託管服務(年費 HK$88,000 起,數據可留港)(https://ysk.hk/services/ai-automation)。
參考來源
- Hugging Face/IBM Research 網誌:Granite Speech 5.0: Transcribe, Translate, and Attribute more Accurately and Faster(2026-10-21)— https://huggingface.co/blog/ibm-granite/granite-speech-5
- 相關模型卡(見上述網誌內 granite-speech-5.0-2b、granite-speech-5.0-470m-turboctc、granite-speech-4.1-2b-plus 連結)
- Open ASR Leaderboard(網誌引用之公開英語短語評估快照日期:2026-10-21)