ElevenLabs 发布会话 AI 的新功能
ElevenLabs 为会话 AI 代理引入新功能
ElevenLabs 是一家专注于 AI 语音克隆和文本语音转换应用的初创公司,最近宣布了其平台的重大更新,使用户能够创建 个性化会话 AI 代理。这一新功能允许广泛的定制,以满足开发者和企业的多样化需求。
用户的定制选项
用户现在可以在 ElevenLabs 的开发者平台上定制会话代理的各种参数,包括 语音音调、响应长度,甚至代理的个性。这种灵活性旨在增强用户体验和与 AI 互动时的参与感。

此前,ElevenLabs 专注于提供语音和文本到语音服务。然而,公司的增长负责人 Sam Sklar 在接受 TechCrunch 采访时指出,许多客户已经在利用该平台开发会话 AI 代理。面临的主要挑战是知识库的集成和客户中断的管理,这促使 ElevenLabs 建立了一套全面的会话机器人管道。
开始构建会话代理
要开始创建会话代理,用户必须登录他们的 ElevenLabs 账户,选择一个模板,或启动一个新项目。他们可以定义关键元素,如代理的 主要语言、初始消息 和系统提示,这些都在塑造代理个性中起着至关重要的作用。
开发者还需要从 Gemini、GPT 或 Claude 等选项中选择一个大型语言模型,并设置 响应温度 的参数,这会影响响应的创造力,以及 令牌使用限制。
通过知识集成增强功能
除了基本设置,用户可以通过添加知识库来丰富他们的会话代理。这可以包括各种类型的数据,如文件、网址或文本块,从而增强机器人的能力。此外,用户还可以选择将自定义的大型语言模型集成到机器人中,以扩展其功能。
ElevenLabs 提供了一个兼容多种编程语言的 SDK,包括 Python、JavaScript、React 和 Swift。该公司还为那些寻求进一步定制能力的用户提供了 WebSocket API。
数据收集和未来发展
该平台允许用户定义 数据收集 的标准,包括客户信息,如在与代理互动时的姓名和电子邮件。用户还可以使用自然语言建立衡量对话成功的标准。
除了这些功能,ElevenLabs 正在继续完善其现有的文本到语音管道,同时为其会话 AI 产品开发 语音到文本 能力。尽管该公司当前并未提供独立的语音到文本 API,但未来可能会考虑推出一个,以与 Google、Microsoft 和 Amazon 等主要竞争对手的现有服务竞争,以及与 OpenAI 的 Whisper、AssemblyAI、Deepgram、Speechmatics 和 Gladia 等专门 API 竞争。
竞争格局和融资计划
随着 ElevenLabs 在市场中的定位,该公司计划寻求超过 30 亿美元 的新融资。它面临来自其他语音 AI 初创公司的竞争,如 Vapi 和 Retell,这些公司也在开发会话代理。更关键的是,ElevenLabs 将与 OpenAI 的实时会话 API 竞争。然而,ElevenLabs 认为其提供 定制 和 灵活性,在模型之间切换的能力将提供竞争优势。
结论
凭借这些新功能,ElevenLabs 将改变会话 AI 的格局,为用户提供强大的工具,以创建能够有效满足各种应用需求的定制 AI 代理。
关键点
- ElevenLabs 推出了构建会话 AI 代理的新功能,允许用户自定义各种参数。
- 用户可以添加知识库以增强代理的能力,并与自定义大型语言模型集成。
- ElevenLabs 计划以超过 30 亿美元的估值筹集资金,并与 OpenAI 等竞争对手竞争。





