ElevenLabs是一家專注于人工智能和語音克隆技術的初創(chuàng)企業(yè)。該公司開發(fā)了AI工具，能夠創(chuàng)建和編輯合成語音。他們的技術以高度精準地復制人類語音而著稱，應用領域涵蓋娛樂、媒體制作和有聲讀物等。
人工智能語音克隆初創(chuàng)企業(yè)ElevenLabs獲得8000萬美元融資，成為獨角獸企業(yè)
2024年1月22日，聲譽日益升高的人工智能語音克隆初創(chuàng)公司ElevenLabs宣布成功完成8000萬美元的B輪融資，該輪融資由著名投資者共同領投，包括安德森霍洛維茨(Andreessen Horowitz)、前GitHub CEO Nat Friedman和企業(yè)家Daniel Gross。該輪融資還包括紅杉資本(Sequoia Capital)、Smash Capital、SV Angel、BroadLight Capital和Credo Ventures的參與，使ElevenLabs的總籌資額達到1.01億美元，公司估值超過10億美元（去年6月約為1億美元）。首席執(zhí)行官Mati Staniszewski表示，新資金將用于產(chǎn)品開發(fā)、擴展ElevenLabs的基礎設施和團隊、AI研究以及“加強安全措施，確保AI技術的負責任和道德發(fā)展”。
ElevenLabs于2022年由前谷歌機器學習工程師Piotr Dabkowski和前Palantir部署策略師Mati Staniszewski共同創(chuàng)立，約一年前推出測試版。Staniszewski表示，他和Dabkowski在波蘭長大，受到翻譯不佳的美國電影的啟發(fā)，決定創(chuàng)造語音克隆工具。如今，ElevenLabs最知名的是其基于瀏覽器的語音生成應用，該應用能夠創(chuàng)建逼真的語音，并可調(diào)整語調(diào)、情感、節(jié)奏等關鍵聲音特征。用戶可以免費輸入文本，由幾種默認語音之一朗讀該文本。付費用戶可以上傳語音樣本，使用ElevenLabs的語音克隆技術制作新的風格。
ElevenLabs正在投資其語音生成技術的不同版本，以創(chuàng)建有聲讀物和配音電影和電視節(jié)目，以及為游戲和營銷活動生成角色聲音。去年，該公司推出了一款“語音到語音”工具，試圖在自動去除背景噪音的同時，保留說話者的聲音、韻律和語調(diào)，并在電影和電視節(jié)目的情況下，翻譯并與源材料同步。在未來幾周的路線圖上是一個新的配音工作室工作流程，以及一款基于訂閱的移動應用，該應用使用ElevenLabs的語音朗讀網(wǎng)頁和文本。
ElevenLabs的創(chuàng)新贏得了包括Paradox Interactive（其最近項目包括《城市：天際線2》和《群星》）和《華盛頓郵報》在內(nèi)的客戶，以及其他出版、媒體和娛樂公司。Staniszewski聲稱，ElevenLab的用戶已經(jīng)生成了相當于100多年的音頻，平臺正在被財富500強公司中41%的員工使用。
但并非所有宣傳都是正面的。
論壇4chan使用ElevenLabs的工具分享模仿名人如艾瑪沃森的仇恨信息�！禩he Verge》的James Vincent能夠利用ElevenLabs惡意克隆聲音，生成包含暴力威脅、種族主義和反跨性別言論的樣本。在Vox，記者Joseph Cox記錄了生成足以愚弄銀行驗證系統(tǒng)的克隆聲音。
作為回應，ElevenLabs試圖根除多次違反其服務條款的用戶，這些條款禁止濫用，并推出了一種檢測其平臺創(chuàng)建的語音的工具。今年，ElevenLabs計劃改進檢測工具，以標記其他語音生成AI模型的音頻，并與未具名的“分銷玩家”合作，使該工具在第三方平臺上可用。
ElevenLabs還面臨著來自聲優(yōu)的批評，他們聲稱公司未經(jīng)他們同意使用了他們的語音樣本，這些樣本可能被用于推廣他們不支持的內(nèi)容或傳播錯誤和虛假信息。在《Vice》的一篇文章中，受害者回憶了ElevenLabs是如何被用于針對他們的騷擾活動，例如使用克隆的聲音分享演員的私人信息他們的家庭地址。
還有一個問題是：像ElevenLabs這樣的平臺對聲音表演行業(yè)構成的潛在威脅。
聲音演員越來越多地被要求簽署放棄他們的聲音權利，以便客戶可以使用AI生成的合成版本，這最終可能取代他們有時沒有相應的補償。人們擔心，尤其是便宜的、入門級的工作最終將被AI生成的聲音所取代，而演員將無法追索。
一些平臺正在試圖找到平衡。本月早些時候，ElevenLabs的競爭對手Replica Studios與SAG-AFTRA簽署了一項協(xié)議，創(chuàng)建并授權媒體藝術家工會成員的數(shù)字復制品。在一份新聞稿中，這些組織表示，該安排建立了“公平”和“道德”的條款和條件，以確保演員同意，并就新作品中使用數(shù)字聲音雙胞胎的談判條款。
然而，這甚至沒有取悅一些聲音演員，包括SAG-AFTRA自己的成員。
ElevenLabs的解決方案是一個聲音市常目前處于Alpha測試階段，并計劃在接下來的幾周內(nèi)更廣泛地推出，市場允許用戶創(chuàng)建一個聲音，驗證并分享它。當其他人使用一種聲音時，原創(chuàng)者會得到補償。Staniszewski說：“用戶始終保留對其聲音可用性和補償條款的控制權。市場旨在邁向與現(xiàn)有行業(yè)實踐協(xié)調(diào)的AI進步的一步，同時也為ElevenLabs平臺帶來多樣化的聲音集合。”
也許隨著ElevenLabs現(xiàn)在是資金最充裕的合成聲音初創(chuàng)公司之一試圖擊退如Papercup、Deepdub、ElevenLabs、Acapela、Respeecher和Voice.ai等新興競爭對手以及亞馬遜、微軟和谷歌等大型科技公司的競爭，情況將來會發(fā)生變化。無論如何，ElevenLabs計劃今年將其員工人數(shù)從40人增加到100人，打算在快速增長的合成聲音市場上長期存在并引起轟動。
