激情六月丁香婷婷|亚洲色图AV二区|丝袜AV日韩AV|久草视频在线分类|伊人九九精品视频|国产精品一级电影|久草视频在线99|在线看的av网址|伊人99精品无码|午夜无码视频在线

AI克隆聲音，只需3分鐘快速部署生成式語音合成 GPT-Sovits

發(fā)布時間：2024-07-08 15:09:49 瀏覽量：186次

AI克隆聲音，只需3分鐘快速部署生成式語音合成 GPT-Sovits(親測可行)

繼生成式文本大模型 Chatgpt、生成式圖片Stablediffusion之后，生成式語音Text To Speech領(lǐng)域有了一匹黑馬GPT-Sovits。這個黑馬在語音效果克隆領(lǐng)域做得十分突出，利用小樣本聲音數(shù)據(jù)即可實現(xiàn)高度相似的聲音仿真，因此備受矚目。GitHub上的star數(shù)迅速飆升，目前已達27.2K。

無論是C端的內(nèi)容生產(chǎn)者，還是B端用戶，想要使用GPT-Sovits進行內(nèi)容生產(chǎn)都會面臨一些技術(shù)挑戰(zhàn)。下面將介紹如何通過阿里云函數(shù)計算快速托管GPT-Sovits來解決這些挑戰(zhàn)。

應用場景

在GPT-Sovits的實踐中，為了進一步探討其價值，先聊聊生成式語音的應用場景：

  • 教育：聲音在教育中至關(guān)重要，有感情色彩的交流遠比純文本交流更有意義，個人教育如英語培訓也和語音密切相關(guān)。
  • 游戲娛樂：個性化聲音是游戲吸引人的關(guān)鍵因素。
  • 新能源：在車載系統(tǒng)中，實時語音交互對于查詢信息至關(guān)重要。
  • 新媒體：在數(shù)字人直播中，專業(yè)聲音是直播效果的關(guān)鍵。
  • 農(nóng)業(yè)：農(nóng)業(yè)智能化需要語音交互方便性。
  • 機器人：機器人需要聲音輸出。

以上的場景與TTS息息相關(guān)，TTS作為核心基礎能力被廣泛應用。要構(gòu)建完整效果還需更多工程化實現(xiàn)和其他基礎模型。

動手部署一個AI克隆大模型

通過函數(shù)計算部署GPT-Sovits模型有兩大好處：

1. 無需擔心GPU服務器維護和環(huán)境配置，即可快速部署和體驗模型。
2. 可充分利用函數(shù)計算按量付費、彈性伸縮等優(yōu)勢，為用戶高效提供基于GPT-Sovits模型的文本到語音生成服務。

技術(shù)架構(gòu)概覽

本方案的技術(shù)架構(gòu)包括函數(shù)計算、文件存儲NAS和專有網(wǎng)絡VPC。

重要：

1. 阿里云不對第三方模型的合法性、安全性、準確性承擔責任。
2. 用戶需自覺遵守第三方模型的用戶協(xié)議、使用規(guī)范和相關(guān)法律法規(guī)，使用模型需符合相關(guān)責任。

部署GPT-Sovits模型

1. 登錄函數(shù)計算3.0控制臺。
2. 在左側(cè)導航欄選擇應用。
3. 在應用頁面選擇人工智能>語音克隆生成 GPT-SoVITS，點擊立即創(chuàng)建。
4. 在創(chuàng)建應用頁面，選擇直接部署，確保所需權(quán)限已獲取，服務狀態(tài)已開通，其他配置保持默認，然后點擊創(chuàng)建應用。
5. 在活動應用創(chuàng)建提醒對話框中，選中函數(shù)計算FC和文件存儲NAS，同意并進行部署。
6. 等待約1分鐘，部署狀態(tài)變?yōu)椴渴鸪晒?，即可開始體驗應用。

快速體驗

部署完成后，使用DEMO聲音樣例，進行聲音合成體驗。嘗試合成童年經(jīng)典動畫片臺詞：

  • 《小精靈》：穿梭在銀河的火箭隊，白色的明天在等著我們！
  • 《灌籃高手》：成為全國第一是我的夢想。
  • 《舒克和貝塔》：舒克開飛機的舒克。

合成操作步驟：

1. 選擇默認語音模板，輸入文本，點擊合成語音。
2. 合成完成后，點擊播放。

聲音訓練：

通過微調(diào)GPT-Sovits大模型，生成理想的聲音。訓練過程中的中間產(chǎn)物存儲在NAS的output文件夾下。需使用默認的UVR5和ASR模型。

1. 數(shù)據(jù)預處理，上傳原始聲音文件進行處理。
2. 微調(diào)文本，調(diào)整原始文本內(nèi)容。
3. 開始訓練，開啟SoVITS和GPT訓練，模型存儲在NAS下的對應文件夾。
4. 訓練完成后，在語音克隆&推流頁簽刷新頁面，選擇訓練模型，再體驗合成語音。

若需了解更多，請使用釘釘進入“阿里函數(shù)計算官網(wǎng)客戶2群”（群號：64970014484）。

相關(guān)鏈接：

[1] GPT-Sovits：https://github.com/RVC-Boss/GPT-SoVITS

[2] 函數(shù)計算3.0控制臺：https://fcnext.console.aliyun.com/

[3] 官方README：https://github.com/RVC-Boss/GPT-SoVITS/blob/main/docs/cn/README.md

熱門課程推薦

熱門資訊

請綁定手機號

獲取驗證碼
x

同學您好！

您已成功報名0元試學活動，老師會在第一時間與您取得聯(lián)系，請保持電話暢通！
確定