開會錄音想直接變摘要、客服電話想交給 AI 先處理、影片想做多語配音,過去常得接好幾套工具。Mistral 10 月 20 日公布的 Voxtral 3,想把「聽懂、思考、開口回答」接成同一條工作流程。它是一組語音模型與開發工具,不是一個裝上手機就會幫你接電話的現成 App。

它究竟做了什麼?

第一,語音轉文字。官方稱批次轉錄支援超過 50 種語言,可區分不同說話者,還能先餵入專有名詞,減少產品名、人名被聽錯的機會。第二,文字轉語音。Voxtral Speech 3 支援超過 35 種語言、50 多種口音或方言設定,能調整語速、重音與情緒。第三,語音代理:把聽、模型推理、查資料或呼叫工具、說出答案串起來,處理多輪對話。

有個數字別混在一起:官方的「50 多種語言」主要是轉錄能力;即時轉錄的語言範圍和配音的語言範圍各不相同。中文出現在官方語音支援清單,但台灣口音、專有名詞與混合中英語境的效果,仍應先用自己的樣本測。

一般工作者現在用得上嗎?

有語音內容、客服或國際業務的團隊比較容易看到價值。例子是客服來電先辨識問題,查詢訂單狀態,再用語音回覆;或把多人的會議錄音分段轉文字,交給人工核對決策與待辦。Mistral 已開放 API 與 Studio 試用;要把它接進電話或公司系統,仍需開發、權限設定與費用評估。

錄音取得當事人同意、個資保存與聲音仿製授權也不能略過。官方提供自有部署選項,但「能自己架」不代表預設就完全在本機執行;先確認所選方案的資料處理地點。

先做一個小測試

拿一段已獲同意、包含中文與英文名詞的 2 分鐘錄音,檢查轉錄正確率、說話者區分、修正時間,再決定值不值得接進正式流程。需要配音時,另外檢查語氣、專有名詞發音與每分鐘成本。別先把整條客服線交給 AI。

資料來源