image of ElevenLabs前往官網

什麼是 ElevenLabs?

ElevenLabs 是一個專注於語音與音訊生成的 AI 音訊研究與部署平台。根據所提供的頁面,它由三個主要產品領域組成:用於內容創作的 ElevenCreative、用於客戶體驗與對話式 AI 的 ElevenAgents,以及供開發人員使用的 ElevenAPI。該平台的既定目標是以 AI 語音技術為企業、創作者與開發人員提供支援。

核心技術包括用於文字轉語音、語音轉文字、聲音複製、聲音設計、配音、音效與音樂生成的基礎模型。該平台支援超過 70 種語言,並提供存取包含超過 10,000 種語音的聲音庫。

如何使用 ElevenLabs?

使用方式取決於所選的產品領域:

  • ElevenCreative: 這是一個以網頁為基礎的平台,用於建立與編輯音訊內容。頁面提到一個用於播客、有聲書與旁白的「全方位 AI 編輯器」。使用者可以從聲音庫中選擇,或複製/設計自己的聲音,然後輸入文字以生成語音,或使用其他工具製作音樂與音效。ElevenLabs 也提供 iOS 與 Android 的行動應用程式。
  • ElevenAgents: 此產品允許使用者設定、部署與監控對話式 AI 代理。這些代理可以透過電話、聊天、電子郵件與 WhatsApp 等不同管道進行互動。流程包括設定具有特定行為的代理、對其進行測試,並分析其效能。
  • ElevenAPI: 開發人員可以使用 REST API 與 SDK,將 ElevenLabs 的音訊 AI 功能整合到自己的應用程式中。頁面提到適用於 JavaScript 與 Python 的 SDK。存取需要 API 金鑰。

ElevenLabs 的核心功能

文字轉語音

從文字生成語音。頁面列出多個模型,並可依一致性、延遲或情感控制來選擇。提到的模型包括 Eleven Flash(用於低延遲對話用途)、Eleven Multilingual 與 Eleven v3(被描述為富有表現力)。

語音轉文字

將音訊轉錄為文字。頁面提到 Eleven Scribe 模型,支援說話者分離與字元級時間戳記。

聲音複製與設計

使用者可以複製自己的聲音,或根據提示設計新的聲音。該平台也提供存取大量既有聲音的資源庫。

語音代理

ElevenAgents 允許建立 AI 驅動的對話式代理。功能包括全通路支援(電話、聊天、電子郵件、WhatsApp)、用於衡量解決率的分析、測試,以及合規護欄。

音樂與音效

ElevenLabs 提供用於生成任何類型音樂與建立自訂音效的工具。頁面指出音樂的商業權利因訂閱方案而異。

配音

提供配音工具以將內容在地化。頁面提到 Dubbing v2 可以跨語言保留原說話者的情感與表演。

ElevenLabs 的使用案例

內容創作

為廣告、有聲書、播客與社群媒體內容製作旁白。

角色配音

為卡通或電玩遊戲生成有趣且引人入勝的聲音。

客戶體驗

部署語音代理來處理來電與去電、提供客戶支援,並執行潛在客戶資格審查。

開發人員整合

透過 API 建置需要文字轉語音、語音轉文字或其他音訊 AI 功能的應用程式。

關於 ElevenLabs 的常見問題

ElevenLabs 可以免費使用嗎?

所提供的頁面指出有免費方案,因為它列出「免費開始」與「免費試用」。SoftwareApplication schema 指定優惠價格為 0 美元。然而,它也提到付費訂閱方案,以及音樂的某些商業權利因訂閱方案而異。

支援哪些語言?

頁面指出該平台支援超過 70 種語言。頁面上提供了支援語言的清單,包括英文、西班牙文、法文、德文、中文及許多其他語言。

我可以複製自己的聲音嗎?

可以,頁面將聲音複製列為功能,並提到能夠複製自己的聲音。它也在 API 文件中列出「Instant Voice Cloning」端點。

ElevenLabs 提供 API 嗎?

是的,該平台提供 ElevenAPI,具備 REST API 以及適用於 JavaScript 與 Python 等語言的 SDK,供開發人員整合其音訊 AI 功能。

生成的聲音可以免版稅使用嗎?

頁面並未聲明聲音可免版稅使用。它提到音樂「已清除可供廣泛商業使用」,但「商業權利因訂閱方案而異」。它並未對所有語音生成做出類似聲明,也未提供關於免版稅狀態的資訊。

同類工具

瀏覽分類