網易有道在AI Open Day釋出會上開源兩款同傳模型——子曰4-R2T2與子曰4-T3PO,均具備流式輸出能力,主打極低時延與高流暢度的即時同傳體驗。與此同時,有道還發布了AI原生語音Agent網易叭哥說,以及辦公Agent應用LobsterAI 2.0。
兩款開源模型分工明確。子曰4-R2T2是一款低延遲、高精度的真流式自動語音識別(ASR)模型,平均延遲僅200至600毫秒。有道稱,在多項benchmark中,該模型的延遲與識別質量均達到開源模型中的最先進水平,與閉源模型相比也不遜色。其訓練採用穩定字首資料、強制時間對齊資料和詞元級音訊分割等資料構建技術,並結合最長穩定字首(LSP)學習範式,使模型在流式輸出設計下仍保持較高的離線識別準確率。
子曰4-T3PO則是一款擁有140億引數的文本到文本同步機器翻譯(SiMT)模型。有道團隊通過高質量分段對齊資料構建、翻譯模型流式冷啟動以及基於帕累託感知的強化學習完成訓練。該模型同樣採用全流式輸出,使用者可調節延遲模式,在不同使用場景下從低延遲到高質量之間切換。它還能與外部流式ASR模型聯動,實現語音到文本的即時轉換。現場演示了一段超快語速的即時翻譯,兩款模型組合下語音被快速清晰地譯為中文。
新發布的網易叭哥說被定位為網易首個AI原生語音Agent,思路是“從語音轉文字走向語音轉意圖”。它在語音識別之後繼續做語義理解,把口語中的重複、停頓、改口整理為可直接使用的文字,可用於聊天、郵件、文件等場景。產品支援100多種語言的即時語音翻譯,有道稱在計算機、金融、醫學等領域翻譯準確率可達98%以上。該產品承諾終身免費,聲音僅在本地處理,不上傳、不記錄,也不用於模型訓練。目前Mac與Windows桌面端已全量上線,移動端仍在開發中。
口語學習產品Hi Echo累計使用者突破1000萬,此次升級為Agent口語私教,採用端到端全雙工語音對話,支援隨時打斷,並能識別對話中的語氣與情緒。系統從首次對話開始評估使用者水平,據此生成學習計劃並動態調整,底層為有道自研的Helix目標驅動型自進化學習系統。場景覆蓋口語考試、商務談判與求職面試,新版將在下週上線應用市場。有道同時宣佈與雅思官方達成合作,Hi Echo成為BC雅思官方模擬測評系統首家全面合作伙伴。
辦公Agent方面,LobsterAI是國內首個100%開源的桌面級辦公Agent,今年2月19日釋出。截至目前,其使用者規模突破100萬,活躍使用者次日留存超80%,人均每日token消耗超2000萬,GitHub Star超6000,累計釋出79個版本。2.0版本最大變化是生態相容,全面相容OpenClaw 2.0,底座同步升級,該版本有900多位貢獻者、1.6萬個PR。新增的Sites功能讓Agent生成結果可一鍵擁有公網可訪問地址並支援分享碼;Teams功能面向團隊協作,取消席位費,只按實際用量收費。
據網易有道CEO周楓現場披露,有道AI同傳累計服務使用者超過2500萬,使用次數同比增長近一倍。他在採訪中提到,LobsterAI與同類產品最大的不同在於開源、不鎖定生態,可對任何應用開放適配;網易使用者群體也呈現年輕化特徵。周楓還表示,公司目前關注學習、工作和廣告營銷三大方向,其中廣告營銷業務已佔公司近一半,但此次新發布暫未涉及該業務線。
從行業視角看,有道此次釋出集中在學習與工作兩大場景,把模型能力進一步向Agent形態延伸。開源同傳模型若能持續保持低延遲與高準確率,將降低即時語音翻譯、會議記錄、語音助手等應用的開發門檻,對語音互動賽道的競爭格局形成影響。不過,從技術能力到規模化應用,仍要看真實工作流中的任務完成率、使用者使用頻次以及由此形成的商業價值。這些產品能否從單點體驗進入高頻工作場景,將是驗證這套AI佈局的重要指標。