速途元宇宙研究院2月28日訊 近日,Meta舉辦的實(shí)驗(yàn)室討論會(huì)公布了元宇宙的多項(xiàng)新技術(shù),包括語(yǔ)音生成元宇宙場(chǎng)景的Builder Bot、超級(jí)AI助手CAIRaoke等。
語(yǔ)音生成場(chǎng)景的Builder Bot。在錄制的視頻中,我們可以看到小扎和一位同伴在虛擬的環(huán)境中,通過(guò)一系列的語(yǔ)音指令讓本來(lái)單調(diào)的虛擬背景中,增加云朵、樹(shù)木、小島、桌椅等虛擬物品,隨著語(yǔ)音指令的結(jié)束,一個(gè)相較豐富的虛擬場(chǎng)景建立了起來(lái)。不過(guò)現(xiàn)在的Builder Bot只是簡(jiǎn)單的demo展示,更加復(fù)雜的3D環(huán)境的生成需要時(shí)間與更深的研究。
超級(jí)AI助手CAIRaoke。底層是一種自我監(jiān)督端到端的神經(jīng)網(wǎng)絡(luò)模型,這個(gè)模型可以理解與學(xué)習(xí)用戶(hù)的聲音與肢體語(yǔ)言,讓我們可以在虛擬數(shù)字世界中和語(yǔ)音助手的對(duì)話(huà)更加流暢自然。在視頻的演示中,AI助手可以與人交流的同時(shí),關(guān)注到煮飯過(guò)程中的鹽量,并且及時(shí)的提醒用戶(hù)補(bǔ)充鹽的份量。目前,這一技術(shù)已經(jīng)在其視頻通話(huà)potal設(shè)備中應(yīng)用,未來(lái)也會(huì)集成在AR/VR產(chǎn)品中,增加與數(shù)字助手的交互。
通用機(jī)器翻譯工具。這是Meta正在開(kāi)發(fā)的一項(xiàng)技術(shù)-通用的語(yǔ)音翻譯器,旨在提供所有語(yǔ)言的即時(shí)語(yǔ)音到語(yǔ)音的翻譯,而語(yǔ)言的種類(lèi)涵蓋所有書(shū)面語(yǔ)言。這個(gè)通用的AI機(jī)器翻譯工具可以打通我們與信息、人的屏障,語(yǔ)言從此不再是限制我們獲取信息的障礙。
除此之外,Meta還公布了其他的一些AI工具,這些公布的最新AI技術(shù)和此前Meta公布的超級(jí)計(jì)算機(jī)等,未來(lái)的成熟轉(zhuǎn)化,給元宇宙帶來(lái)的影響令人遐想。