開源視頻實(shí)時(shí)翻譯大語言模型:Meta AI 的 MuAViC 的新演示:第一個(gè)音頻視頻語音翻譯基準(zhǔn)

什么是MuAViC?

MuAViC是第一個(gè)音視頻語音翻譯基準(zhǔn),也是最大的音視頻語音識別多語言基準(zhǔn)。它包含大約 1,200 小時(shí)的跨 9 種語言的轉(zhuǎn)錄數(shù)據(jù)。

在無數(shù)的日常情況下,背景噪音——交通聲、音樂聲、其他人說話的聲音——讓我們更難理解別人在說什么。人類經(jīng)常使用來自其他感官的信息,尤其是視覺,來幫助我們交流(正如 Harry McGurk 和 John MacDonald 在 1976 年的研究“聽嘴唇和看聲音”中指出的那樣)。例如,如果您在一場喧鬧的音樂會上與朋友交談,您可能會關(guān)注他們的臉部以補(bǔ)充您能聽到的內(nèi)容。

還有 85% 的精彩內(nèi)容
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。
支付 ¥9.90 繼續(xù)閱讀

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容