OpenAI再發大招推出Voice Engine!讓失語者發聲只需要15秒音頻...

2024-04-02 18:40:13    編輯: robot
導讀 作者:小巖 編輯:彩雲 許久沒有新動作的OpenAI最近顯得頗爲低調。但事實上,對於這些卷的不能再卷的AI頭部公司而言,沒有人是敢躺平的。大家不是在發布新品,就是在研發新品的路上。 3月30日,Op...

作者:小巖

編輯:彩雲

許久沒有新動作的OpenAI最近顯得頗爲低調。但事實上,對於這些卷的不能再卷的AI頭部公司而言,沒有人是敢躺平的。大家不是在發布新品,就是在研發新品的路上。

3月30日,OpenAI宣布推出全新的人工智能模型——Voice Engine。這並非是一個全新的模型,事實上,自2022年开始,OpenAI便默默布局,开展了對於該模型的研發工作。

工作原理簡單而高效!能夠駕馭合成聲音所帶來的挑战和機遇。

對於這款最新發布的模型,OpenAI官方推特的措辭異常小心而謹慎,它表示,“我們正在分享從 Voice Engine模型的小規模預覽中獲得的經驗體會”。事實上,Voice Eengine所呈現出來的工作效率的確是簡單而高效的。

Voive Engine最大的特點在於語音克隆。其中的工作原理很簡單:用戶僅需通過電話或電腦麥克風錄制一段15秒的聲音片段,OpenAI的語音引擎便能生成“與其聲音高度相似的自然語音”。在此之後,無論是面對什么樣的文本,它都能以近乎完美的克隆聲音進行朗讀。

這項技術的問世,顯然會對那些經常錄制自己語音的人,諸如播客,配音藝術家,口語表演者,有聲書和廣告解說員,遊戲玩家,流媒體主播,客戶服務代理,銷售人員等衆多職業產生重大影響。

除此之外,OpenAI還特別強調了語音引擎在支持非語言個體方面的獨特能力。它能爲這些個體提供個性化的,非機械化的聲音,爲那些有語言障礙或學習需求的人提供治療和教育方面的幫助。

一旦技術得以成行,Voice Engine不僅能實現更真實的人聲復刻,更重要的是,它還能適用於各種場景的應用,諸如爲孩童朗讀故事,企業產品介紹,醫療咨詢服務,爲語言障礙者提供幫助等。它不僅支持多種語言,更能模仿出不同的語調和情感,應用不可謂不廣泛。

Voice Engine由來已久,相關應用早已有之。

正如我們前文所提到的那樣,早在 2022 年底,OpenAI 便开發了 Voice Engine 並將其用於支持文本到語音 API 中的預設語音以及 ChatGPT 語音和朗讀。所以,在展望Voice Engine未來可能產生的廣泛應用場景之前,我們不妨看看它曾經有過哪些實用案例。

首先,Voice Engine可以通過自然,富有感情的聲音爲非閱讀者和兒童提供閱讀幫助。這些聲音不是呆板的預設聲音,它代表了更廣泛的說話者。譬如一家名爲Age of Learning 的教育技術公司就一直在使用 Voice Engine 生成預設的畫外音(voice-over)內容。他們還利用 Voice Engine 和 GPT-4 創建實時且個性化的回應,從而與學生進行互動。

其次,Voice Engine可以翻譯視頻和播客等方面的內容。通過使用Voice Engine,創作者和企業可以用自己的聲音流利地向世界各地更多的人進行傳播。據悉,HeyGen便是這方面的早期應用者之一。HeyGen是一個人工智能視覺故事平台,通過使用 Voice Engine 進行視頻翻譯,將演講者的聲音翻譯成多種語言,從而覆蓋全球受衆。值得一提的是,即便是翻譯,Voice Engine也會保留原說話者的母語口音,譬如帶有法語口音的英語等。

此外,Voice Engine可以爲不會說話的人群提供支持:爲患有影響語言的疾病的人群提供治療應用;爲有學習需求的人群提供教育增強功能等。譬如它能夠爲不會說話的人群提供多種語言的獨特非機器人語音。用戶可以選擇最能代表自己的語音,對於多語種用戶,它也能使每種口語都保持一致的語音。

擔心合成技術可能會被濫用,暫時沒有完全公开的計劃。

盡管語音生成式AI被認爲是OpenAI的又一次巨大突破,但很顯然,官方並不急於向外界完全公开Voice Engine。究其原因,主要是因爲合成語音技術具有巨大的風險,很可能會被濫用。特別是最近一段時期,由合成語音引發的電信詐騙,版權侵害等社會風險問題層出不窮,這些都是OpenAI做出“暫不公开”選擇的重要原因。OpenAI也表示,在开發的過程中,一直在與政府,媒體,教育等社會各界的美國和國際合作夥伴接觸,保證聽取和採納反饋。特別當下這處於美國大選時期,OpenAI又正與政府和外部企業合作,勢必會採取必要的安全措施和謹慎的態度。

無獨有偶,OpenAI於2月推出了視頻生成AI“Sora”也同樣未對外界公开。面對生成式AI技術日益普及所引發的濫用風險,OpenAI對商用化明顯採取了較審慎的態度,以確保安全和負責任的使用。

當然,我們無法否認,生成式AI的潛力是無窮的,終究要有落地應用的一天。相較於始終保持“審慎开放”,乃至“拒絕开放”的態度,我們莫不如提前做好評估和防範。譬如要逐步淘汰基於語音的身份驗證作爲訪問銀行账戶和其他敏感信息的安全措施;教育公衆了解AI技術的能力和局限性,包括存在欺騙性AI內容的可能性;加快开發和採用追蹤視聽內容來源的技術,以便隨時明確您是與真人還是與AI互動等舉措,都是勢在必行的。無論OpenAI是否會廣泛部署這項技術,我們大家都要了解它的發展方向。

最後,我們再來討論一個問題:在生成式AI領域,OpenAI是否依舊領跑?

從2022年便孵化出了Voice Engine這一點來看,OpenAI是早就开始布局合成語音這一賽道了。從某種程度上說,現在分享的最早期版本很可能只是在小秀肌肉,內部應該已經完成了強力迭代。而且,根據The Information的獨家報道,微軟和OpenAI將合力打造一台成本高達1000億美元,擁有數百萬個GPU的超級計算機“Stargate (星門)”。它將爲OpenAI的人工智能提供巨大的動力和算力會,不誇張的說,照比現在微軟給OpenAI的支持直接提升幾個量級。

此外,從OpenAI通篇官宣文來看,OpenAI不會在短期內向公衆推出合成語音領域的更新了,畢竟這個賽道日趨敏感。這或許是出於重塑企業形象和公信力的需要。未來我們或許可以期待OpenAI將Sora和Voice Engine以怎樣的模式集成到下一代 GPT。一旦這樣的GPT得以成行,OpenAI在生成式領域的霸主地位將不可動搖。

       原文標題 : 新火種AI|OpenAI再發大招推出Voice Engine!讓失語者發聲只需要15秒音頻...



標題:OpenAI再發大招推出Voice Engine!讓失語者發聲只需要15秒音頻...

地址:https://www.utechfun.com/post/352825.html

鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。

猜你喜歡