《科創(chuàng)板日報(bào)》10月24日訊“AI孫燕姿”之后，又有黑科技出圈。
近日，頂流歌手泰勒斯威夫特（中國粉絲稱她為“霉霉”）操著一口流利普通話的視頻在各大社交平臺(tái)上廣泛傳播。視頻中，霉霉在講中文時(shí)，準(zhǔn)確卡點(diǎn)，音色與講母語時(shí)候的音色類似，甚至連口型都能對上。
圖源網(wǎng)絡(luò)
不止如此，網(wǎng)傳熱門視頻中還出現(xiàn)了說著中文的特朗普、憨豆、�，斘稚�，以及說著英語的蔡明。除了中英互換之外，國外還有人嘗試將英語翻譯成日語等其他6種語言，效果同樣很不錯(cuò)。
怎么做到的？
據(jù)了解，這些視頻都使用了AI視頻工具HeyGen。創(chuàng)作者只需要上傳視頻并選擇要翻譯的語言，該工具可實(shí)現(xiàn)自動(dòng)翻譯、調(diào)整音色、匹配嘴型。
不過HeyGen并不完美，視頻字幕需要?jiǎng)?chuàng)作者添加，此外有創(chuàng)作者表示，如果刻意對比，視頻人物在說另一種語言時(shí)，情感還原度仍有欠缺。
這不能阻擋該工具的火爆，HeyGen目前已推出付費(fèi)版，但可免費(fèi)試用、生成1分鐘時(shí)長視頻，有創(chuàng)作者稱排隊(duì)了7000個(gè)視頻才完成翻譯。
背后玩家來自中國 產(chǎn)品上線7個(gè)月實(shí)現(xiàn)盈利
HeyGen是為視頻創(chuàng)作者打造的工具，翻譯功能并非其全部。粗略看下來，圍繞視頻創(chuàng)作，HeyGen的功能十分強(qiáng)大，包括主播換臉、文字轉(zhuǎn)口播視頻、創(chuàng)建虛擬主播、語音克攏
數(shù)字人創(chuàng)建是其主推的功能。據(jù)HeyGen介紹，即使沒有攝像機(jī)、攝影棚和演員，普通人也可以通過該工具制作視頻。用戶只需要用上傳一段2分鐘的小視頻，就能制作一個(gè)和真人一樣的數(shù)字人，即使是像手勢、面容和口型這種“細(xì)微肢體語言”也能調(diào)整。
Joshua Xu就曾親自上陣，推出了與自己形象一致的數(shù)字人。
Joshua Xu的虛擬版
目前其客戶包括英偉達(dá)、亞馬遜、volvo等，產(chǎn)品支持300多種聲音、40多種語言，提供超過100+數(shù)字人素材和模板，廣告、電商、新聞等一應(yīng)俱全，也可以自己編輯PPT生成。
天眼查數(shù)據(jù)顯示，詩云科技已獲得來自紅杉中國、真格基金等風(fēng)投們累計(jì)近千萬投資。
值得注意的是，HeyGen還是一款已實(shí)現(xiàn)盈利的AI應(yīng)用。該工具制定了非常細(xì)化的付費(fèi)方案，對個(gè)人版/企業(yè)版進(jìn)行了分類，可選擇包月還是包年，提供加價(jià)使用的插件，對于普通用戶而言，包年版價(jià)格平攤下來，每月需花費(fèi)24美元/月。
公司在今年4月底發(fā)布的博客中透露，產(chǎn)品上線（2022年7月推出）后歷時(shí)178天，該公司年度經(jīng)常性收入（ARR，annual recurring revenue）已達(dá)到100萬美元，上線7個(gè)月達(dá)到盈利狀態(tài)。
Joshua Xu曾表示，HeyGen已經(jīng)積累了數(shù)百萬個(gè)視頻數(shù)據(jù)，也會(huì)考慮做視頻垂直領(lǐng)域的大模型（LLM）。
（科創(chuàng)板日報(bào) ）
