最新資訊：Meta AI 宣布其 UST 系統(tǒng)可實(shí)時翻譯福建話

(資料圖片)

近日，Meta AI 宣布了其通用語音翻譯（UST）項目的突破性更新，該項目是一個主要用于口頭語言的開源實(shí)時語音到語音翻譯系統(tǒng)。

UST 項目已成功翻譯了福建話，UST 系統(tǒng)使福建話使用者能夠通過實(shí)時翻譯技術(shù)用英語交談，反之亦然。

Meta AI?研究人員使用機(jī)器學(xué)習(xí)（ML）數(shù)據(jù)來創(chuàng)建聽覺翻譯系統(tǒng)，包括數(shù)據(jù)收集、模型設(shè)計和評估。Meta 正在發(fā)布其集成的 ML 福建翻譯數(shù)據(jù)和研究論文作為開放資源，使 AI 開發(fā)人員能夠創(chuàng)建涵蓋更多語言的 UST 項目。

由于其不成文的性質(zhì)，Meta 在試圖收集 ML 數(shù)據(jù)以創(chuàng)建福建翻譯平臺時遇到了重大問題。該公司還利用來自類似高資源語言（如普通話）的數(shù)據(jù)來協(xié)助創(chuàng)建 ML 訓(xùn)練數(shù)據(jù)。

此外，Meta 正在使用語音挖掘系統(tǒng)來收集適當(dāng)?shù)姆g數(shù)據(jù)，而無需源文本。在此過程中，Meta AI 開發(fā)人員使用預(yù)先訓(xùn)練的語音編碼器，將未寫入的福建語音數(shù)據(jù)與類似的英語文本對齊，使 ML 系統(tǒng)能夠根據(jù)預(yù)先存在的語言數(shù)據(jù)翻譯福建話。

Meta 指出其翻譯系統(tǒng)是一項正在進(jìn)行的工作，一次只能翻譯一個句子。盡管該公司解釋說，福建項目是實(shí)現(xiàn)語言間實(shí)時同聲傳譯的第一步。

在公告中，Meta 還提到了其實(shí)時翻譯研究如何應(yīng)用于元宇宙服務(wù)。該公司希望通過其 UST 系統(tǒng)在虛擬和現(xiàn)實(shí)世界中鼓勵聯(lián)系和相互理解。

Meta 正在構(gòu)建?VR 社交平臺?Horizon Worlds，可以通過其 Meta Quest VR 頭顯組合訪問，包括最近宣布的?Quest?Pro。

如果 Meta 將其實(shí)時翻譯系統(tǒng)集成到像 Horizons 這樣的元宇宙平臺中，它可以允許用戶與全球語言障礙較低的個人聊天。

此外，Meta Quest Pro?還具有眼睛，面部和身體跟蹤功能，可以實(shí)現(xiàn)更大的個人表達(dá)。結(jié)合 UST 集成，Horizon 可以包含強(qiáng)大的工具，以數(shù)字方式連接個人。

關(guān)鍵詞： Meta 系統(tǒng)可實(shí)時翻譯福建話 metaai