ElevenLabs 推出 Eleven Realtime 语音到语音模型:v1 Mini 主打自然对话、v1 Max 主打复杂任务,并提供兼容 OpenAI 的 Realtime API
阅读 0
- 发布日期
- 2026-10-21
- 类型
- 模型发布
- 相关机构
- ElevenLabs
- 信息来源
- agipulse
这件事意味着什么
【要点】
ElevenLabs 推出 Eleven Realtime,一类「语音到语音」的语音智能体模型,首批两款:v1 Mini 和 v1 Max。官方说法是把语音识别、话轮切换(判断什么时候该说话、被打断怎么办)、大语言模型和语音合成作为一个整体调优,开发者选一个模型就能得到完整的语音智能体,不用再自己拼各个组件。
一、两款分工:v1 Mini 是默认款,延迟和成本最低,面向助手、家教、游戏角色这类以对话本身为主的场景;v1 Max 先推理再回答,支持多步工具调用,面向客服、销售线索筛选、预约等复杂任务,单价高于 Mini。
二、官方公布的数据(ElevenLabs 自测):Mini 首段音频延迟 620 毫秒,Full-Duplex-Bench 95.8%,Speech Agent Arena Elo 988;Max 首段音频延迟 570 毫秒,Big Bench Audio 98.8%,任务成功率 87.1%。支持 90 多种语言,可从 17,500 多个声音里选。
三、用法:在 ElevenAgents 里把智能体的语音模式切到 Realtime 即可;另有 Realtime API,与 OpenAI Realtime API 兼容,改接入地址和模型名(如 eleven_realtime_v1_mini)就能沿用原有代码和 OpenAI 的 SDK。
四、限制:正在分批开放,部分工作区暂时用不了;不能配合自定义大模型或 Amazon Bedrock;零数据保留模式和 HIPAA 只有 Max 支持(美国和欧盟),Max 暂不支持印度和新加坡数据驻留。计费为 ElevenAgents 按分钟费用加模型 token 费用。
【可核验】
产品页:https://elevenlabs.io/realtime
Realtime 模型文档:https://elevenlabs.io/docs/eleven-agents/customization/realtime-models
模型总览:https://elevenlabs.io/docs/overview/models
【我们的判断】
一、语音智能体正从「识别 + 大模型 + 合成」三段拼接走向一体化模型,OpenAI、SpaceXAI 都已有类似产品;ElevenLabs 直接兼容 OpenAI 的接口,明显是想让现有用户低成本切换过来。
二、所有指标都是官方自测,Arena 分数和任务成功率的测法没有详细公开;官方也没发博客或技术报告,产品页和文档是目前唯一的一手材料。
三、对已在用 ElevenAgents 的团队,这能省去组件选型和调参;需要指定特定大模型或合规要求严格的场景,仍要留在自定义模式。
继续了解相关进展
本页由 AGI Pulse 聚合,仅保留标题与链接,不转载正文。 编辑政策