人工智能公司開發(fā)全新語音合成技術 或能幫助解決外語片配音問題
據(jù)AXIOS報道,一些AI公司正在開發(fā)解釋和合成廣告、電影和電視中的聲音的方法。語音合成方面的進展可以幫助解決糟糕的外語片配音問題--它們的出現(xiàn)是因為作為娛樂全球化的一部分,國際內(nèi)容對電影公司和流媒體平臺變得越來越重要。
訪問:
微軟Surface精選機型特惠6.3折起 翻新機滿100減100
但它們引起了人們對深層偽造音頻的可能性以及名人的聲音在他們死后可能被使用的擔憂。
像《魷魚游戲》和《紙鈔屋》這樣的外語片正在吸引創(chuàng)紀錄的觀眾,但對于試圖開拓日益增長的國際市場的電影公司來說,字幕仍然是一塊絆腳石。
例如,觀看《魷魚游戲》配音版的Netflix用戶比觀看字幕版的用戶多。由于大片占用了大量帶寬,小型外語內(nèi)容生產(chǎn)商很難找到足夠的翻譯和配音演員來滿足需求。
人工智能公司Veritone的聯(lián)合創(chuàng)始人兼總裁Ryan Steelberg說:“我們?nèi)匀煌A粼谝粚Χ嗟膹V播模式的思維模式中?!盫eritone開發(fā)了一個名為MARVEL.ai的產(chǎn)品,允許內(nèi)容制作者生成和授權其所謂的“超現(xiàn)實”合成聲音。
這意味著,例如,播客創(chuàng)作者可以將音頻廣告文案解釋為另一種語言,然后MARVEL.ai將生成一個合成版本的聲音,用新的語言閱讀廣告。
Steelberg說:“它讓你有能力以更大的規(guī)模和更低的成本對音頻進行超個性化處理?!?/p>
文字轉語音技術已經(jīng)存在了幾十年,但Veritone的產(chǎn)品使用了“語音轉語音”,Steelberg稱之為“語音即服務”。
Veritone可以訪問來自媒體庫的PB級數(shù)據(jù),并利用這些數(shù)據(jù)來訓練其人工智能產(chǎn)品,創(chuàng)建一個原始語音的合成版本,可以針對不同類型的情感或情緒進行調(diào)整,或者通過翻譯,說出一種外語。
“它不再是另一個人的新聲音,例如代表湯姆·克魯斯說話,”Steelberg說?!斑@真的將是用湯姆·克魯斯的聲音來說另一種語言?!?/p>
NVIDIA一直在開發(fā)技術,允許人工智能改變視頻或動畫的方式,將演員的嘴唇和面部表情與新的語言相匹配--因此將不再有20世紀70年代的電影中那種不同步的配音。這項技術可能會首先用于廣告,但隨著它向更高質(zhì)量的內(nèi)容遷移,它將為明星人才帶來潛在的機會和陷阱。
Steelberg說:“在配音和后期制作方面,合成聲音將成為主流,你會看到這一點被納入人才合同。”
這不僅僅是為了確保好萊塢明星(和他們的經(jīng)紀人)在使用他們的合成聲音時獲得分成,而且也是為了防止這些聲音在技術越來越普及的情況下被劫持用于惡性目的。
值得關注的是,已故名人的聲音和其他創(chuàng)造性屬性將如何被人工智能所利用?
弗蘭克·扎帕等已故音樂家的全息影像已經(jīng)被用于“現(xiàn)場”表演,帶來了數(shù)千萬的收入,而Kenny G最近發(fā)布了與30年前去世的爵士樂大師Stan Getz的“二重奏”。Getz現(xiàn)有資料庫中的樣本音頻資料被用來生成一個新的、合成的旋律--盡管這個旋律被爵士樂作家Ted Gioia稱為“Frankenstein唱片”。
推薦
-
AI卷入俄烏戰(zhàn)爭 人工智能被用于竊聽士兵在戰(zhàn)場上的通信內(nèi)容
在俄烏戰(zhàn)爭中,一種人工智能(AI)工具正在被用于竊聽俄羅斯士兵在戰(zhàn)場上的通信內(nèi)容。該工具是由美國人工...
來源:智東西 -
整體需求不振DDR4持續(xù)跌價 目前仍未有止跌趨勢
眾所周知,DRAM 作為存儲器中的重要組成部分,在半導體產(chǎn)業(yè)鏈當中也是具有舉足輕重的地位,不過,DRAM...
來源:愛集微 -
雷諾首席執(zhí)行官 計劃為電動汽車業(yè)務設立一個單獨部門
雷諾首席執(zhí)行官 Luca de Meo 本周二表示,公司計劃為電動汽車業(yè)務設立一個單獨的部門,最終該部門可...
來源:愛集微 -
通用汽車制定全球連續(xù)性計劃 以減輕汽車行業(yè)面臨的不確定性
通用汽車公司本周一表示,已與其合作伙伴和供應商制定了一項全球連續(xù)性計劃,以減輕中國疫情爆發(fā)后汽車...
來源:愛集微 -
-
元宇宙興起 Web3.0再次成為各大廠商關注焦點
近日,隨著元宇宙的興起,Web3 0又再次成為各大廠商關注的焦點。中國證監(jiān)會科技監(jiān)管局局長姚前發(fā)表文章...
來源:科技日報 -
-
年度全國十大考古新發(fā)現(xiàn)終評會 以網(wǎng)絡會議形式在京舉行
近日,由中國文物報社、中國考古學會主辦的2021年度全國十大考古新發(fā)現(xiàn)終評會以網(wǎng)絡會議形式在京舉行。...
來源:科技日報 -
-
科學家收集123984張核磁共振腦掃描圖 繪制全生命周期人腦發(fā)育圖
英國《自然》網(wǎng)站6日公開的一篇論文,描述了覆蓋人類整個生命周期的大腦發(fā)育標準參考圖。這些參考圖根據(jù)...
來源:科技日報
直播更多》
-
特斯拉公司CEO埃隆馬斯克 向Twitter發(fā)出收購要約
和外界預期的一樣,特斯拉公司 CEO 埃...
-
特斯拉公司CEO埃隆馬斯克 向Twitter發(fā)出收購要約
和外界預期的一樣,特斯拉公司 CEO 埃...
-
筆記本電腦代工廠廣達發(fā)布公告 配合防疫政策暫時停工
筆記本電腦代工廠廣達今(13)日發(fā)布公告...
-
英特爾公司宣布斥資30億美元 擴建美國奧勒岡州D1X工廠
英特爾公司宣布斥資 30 億美元,擴建...
-
莆田電信積極組織開展安全運營專項工作 強化員工安全意識
為全面落實穩(wěn)字當頭、穩(wěn)中求進的云網(wǎng)安...
-
精準落實優(yōu)惠稅率 河北高企稅費減免超百億元
近日,記者從河北省稅務局獲悉,2021年...
資訊更多》
焦點
- 奇瑞新能源一季度達成50013輛銷量 實現(xiàn)255.4%同比增長
- 昆山重新調(diào)整劃定5個靜態(tài)管理區(qū) 延長靜默期7天
- 受蘋果用戶隱私政策調(diào)整影響 科技巨頭2022年營收將減少近160億美元
- 加快湖北數(shù)字化轉型 5G信息技術重塑制造業(yè)發(fā)展形態(tài)
- 斯坦福大學團隊發(fā)表論文 展示大腦運動皮層神經(jīng)網(wǎng)絡如何實現(xiàn)新記憶索引
- 廣東首座華南唯一 廣州匯云數(shù)據(jù)中心入選2021年國家新型數(shù)據(jù)中心名單
- 慢性疾病嚴重威脅我國居民健康 低齡化趨勢明顯
- 消除線路施工安全隱患 智慧光網(wǎng)云守護系統(tǒng)成為工地“火眼金睛”
- IMT-2020推進組蜂窩車聯(lián)工作組第二十次全體會議 近日在線上舉行
- 氣候變暖將珊瑚推向耐熱極限 人工智能助力尋找耐熱珊瑚