ElevenLabs 于 10 月 20 日推出 Eleven Realtime v1 Mini 和 v1 Max,首次以这一产品线提供直接处理语音输入与语音回答的模型。两款模型支持 90 多种语言,并可使用 ElevenLabs 声音库里的 1.7 万多个声音。Mini 面向助手、教学与互动角色,Max 则面向需要推理、调用工具并连续完成多个步骤的任务。
这次更新减少了开发者分别组合语音识别、停顿检测、语言模型和配音服务的工作。ElevenAgents 用户可以在模型列表中选择 Realtime,继续使用平台现有的电话、网页、WhatsApp、知识库、工作流和监控能力。已有 OpenAI Realtime WebSocket 集成的应用,可以更换端点与模型名称接入;原先使用 WebRTC 的应用则需要先改用 WebSocket。
按官方引用的 Artificial Analysis 测试,Max 在 1,000 道 Big Bench Audio 语音推理题上的正确率为 98.8%,Mini 为 75.9%;同一测试的平均首段语音等待时间分别为 0.57 秒和 0.62 秒。工具使用任务中,Max 的完成率也更高。这些数字对应指定测试集和测试条件,产品定位因此把复杂客服与多步骤流程主要交给 Max。