一家企业要跟进100位潜在客户,销售人员需要逐一拨号、确认需求、介绍产品、安排后续沟通。如果是招聘,同样需要花费大量时间联系候选人,了解工作经历、岗位意向和入职时间。这些原本需要人工逐一完成的电话沟通,如今已经可以交给语音AI承担一部分。
ElevenLabs就在自己的招聘流程中引入了AI面试官,让求职者通过语音介绍经历、了解岗位。
另一边,越来越多企业开始使用AI Agent主动拨打销售电话、进行客户回访和预约确认。相比过去依靠固定话术的电话机器人,现在的语音Agent可以听取用户的开放式回答,根据上下文追问,也能在通话过程中查询信息、调用业务系统。
但真实电话里,客户不一定按照预设流程回答问题。他们可能突然打断、临时改变需求,或者要求稍后联系。如果AI只会流畅地说话,仍然很难独立完成这些工作。
这也是声网对话式AI引擎重点解决的问题:将实时音频传输、语音识别、大模型、语音合成和对话控制连接起来,让开发者能够构建持续、自然的实时语音交互,并进一步对接具体业务流程。
一. AI外呼已经开始承担具体的销售和服务任务
以销售线索跟进为例。一位客户在官网申请产品演示,留下电话号码,并同意接受电话联系。过去,销售人员可能要等到工作时间才能拨号。现在,企业可以安排AI在允许的时段进行初步沟通。
电话接通后,Agent先说明来意,再询问客户关注的产品、使用场景以及计划上线时间。
如果客户已经有明确需求,系统可以记录相关信息,安排销售人员继续跟进;如果客户表示暂时没有采购计划,Agent可以询问是否需要日后联系,并根据回答更新客户状态。
这样的流程涉及多个环节:呼叫系统负责建立电话连接,对话式AI负责实时交流,CRM保存客户信息,日程或工单系统处理后续任务。
在技术接入上,声网对话式AI引擎支持SIP电话接入,其智能外呼方案可以与PSTN公共电话网络衔接,让语音Agent参与电话呼入、呼出场景。
开发者可以结合业务需求配置ASR、LLM、TTS等模块,并利用对话式AI Studio进行智能体编排和调试。
不过,拨通电话只完成了第一步。接下来的交流是否顺畅、能否识别客户需求、是否正确执行后续操作,才是判断一通AI外呼有没有价值的关键。
客户拒绝联系,AI不能只回答一句“好的”
例如,客户在电话中说:“暂时不需要,以后别再给我打电话了。”
系统需要把这句话识别为停止联系的请求,结束当前推销,并通知业务系统更新相应的联系状态。对于需要遵守免打扰名单和用户授权规定的地区,拨号前还必须完成相应的合规检查。
如果客户说“下周三再打给我”,Agent则需要确认具体时间,将回访安排提交给业务系统。只有预约成功,才能向客户确认。
这些动作需要业务系统共同完成。大模型负责理解用户表达的意图,真正的名单管理、任务调度和记录写入仍需要企业自己的系统负责。
二. 实时语音交互,是AI外呼体验的基础
销售人员打电话时,会根据客户的停顿、语气和临时插话调整说话节奏。语音Agent也要面对类似情况,只是它需要依靠一整条技术链路完成判断。
典型的语音交互流程包括音频采集与传输、语音识别(ASR)、大语言模型(LLM)推理、语音合成(TTS),最后再将生成的声音传回用户。
只看单个模型的响应速度,并不能准确判断整通电话的体验。网络传输、语音端点检测、模型推理和音频播放都会影响用户听到回复的时间。
1. 用户停顿时,AI怎么判断他有没有说完?
假设AI正在询问客户希望购买哪类产品。
客户回答:“我们主要想做一个在线教育平台……嗯,还需要支持多人同时上课。”
如果Agent听到“在线教育平台”后就开始回答,很可能打断后半句;如果每次都等待很长时间,又会让对话变得迟缓。
传统语音活动检测(VAD)可以识别声音何时出现、何时消失,但短暂停顿并不一定代表用户已经完成表达。
因此,实时语音Agent通常需要结合语义信息判断轮次是否结束。
声网对话式AI引擎支持语义轮次判断和优雅打断。企业可以启用基于语义的结束发言检测,让系统在用户尚未说完时继续等待。
这里需要平衡准确性与响应速度:等待更充分,可以减少抢话,但也可能增加延迟。不同业务场景适合的参数并不相同。
2. 客户突然插话,之前的语音要立即停下来
另一种常见情况是,Agent正在介绍产品功能,客户突然说:“不用讲这些,直接告诉我价格。”
系统需要识别客户的插话,停止当前回复,重新理解需求。如果此前生成的音频还在缓冲队列里播放,即使大模型已经停止输出,用户仍可能听到旧内容。
因此,打断处理需要协调语音检测、对话状态和音频播放,并及时清理不再需要的回复。
声网对话式AI引擎同时支持语音自动打断和通过API主动打断。官方公布的性能指标包括端到端响应延迟低至650ms、打断响应低至340ms。这些是特定条件下的低延迟表现,实际效果仍取决于模型组合、网络环境和业务配置。
对于销售外呼,这类能力直接影响客户愿不愿意继续交谈。频繁抢话或长时间没有回应,都可能让用户提前挂断。
3. 嘈杂环境下,还要听清真正的通话对象
客户不一定坐在安静的办公室里接电话。地铁站、商场、开放办公区都可能产生背景人声和噪声。
如果系统把旁边人的说话声当成客户指令,可能错误打断当前回复,甚至改变对话方向。
声网对话式AI引擎提供选择性注意力锁定、声纹识别等音频能力,用于改善复杂声音环境中的目标说话人识别和交互稳定性。
在实际部署中,开发者仍需要针对目标设备、麦克风、电话线路和环境噪声进行测试。尤其是通话降噪、说话人区分与ASR之间,任何一环出现偏差,都可能影响后续理解。
三. 让AI完成销售任务,还需要连接企业业务系统
让Agent回答“你们有什么产品”,相对容易。让它确认库存、预约演示、创建客户跟进任务,则需要更多系统参与。
例如,客户在电话中说:“我们下周二下午有时间,你帮我约个产品演示吧。”
一个完整的处理过程通常是:
- Agent理解客户的预约意图,确认日期、时区和产品需求。
- 调用日程系统查询可用时间。
- 客户确认具体时段后,再提交预约请求。
- 根据业务接口返回的结果,向客户说明是否预约成功。
- 把相关信息同步到CRM,供销售人员后续跟进。
如果日程系统没有响应,AI就不能擅自承诺预约已经完成;如果客户更改时间,也需要处理原有安排。
声网对话式AI引擎已经提供自定义工具调用能力。在使用支持Function Calling的文本大模型时,可以将符合要求的HTTP接口配置为工具,让Agent根据对话内容查询或提交业务数据。
例如,开发者可以把查询客户信息、创建工单、发送跟进短信等操作封装成工具,连接企业已有的业务服务。
根据官方文档,当前自定义HTTP工具主要采用同步调用方式,支持GET和POST请求。请求超时、重复提交、接口权限和业务数据校验,仍需要开发者结合后端系统处理。
这也说明,AI外呼系统不能只考察语言模型会不会聊天。模型能否正确识别任务、选择工具、填写参数,以及在执行失败时给出准确回复,同样重要。
四. 招聘面试与销售外呼,使用的是相似技术,但对话流程不同
把语音Agent用于招聘,面对的又是一组不同的问题。
一次初步招聘访谈,可能需要了解求职者的工作经历、负责过的项目、岗位意向和可入职时间。问题通常有相对明确的顺序,但候选人的回答未必能一次提供全部信息。
比如,Agent询问:“你之前主要负责哪些销售工作?”
候选人回答:“我负责过一些企业客户。”
这个回答并不能说明太多。Agent需要继续了解客户类型、销售流程、候选人的具体职责,以及是否有独立推进项目的经历。
如果回答已经足够完整,就继续下一个问题;如果回答含糊,则追问细节;如果候选人临时询问岗位情况,也需要在回答后回到尚未完成的访谈内容。
这种交互方式可以用预设任务流程配合大模型理解能力来实现。
把信息收集和招聘判断分开
在设计招聘Agent时,有必要区分两项工作:一项是通过对话收集候选人的真实经历,另一项是评估其与岗位的匹配程度。
通话阶段可以侧重信息收集与核对,例如按顺序提出问题、记录候选人的回答、发现遗漏时继续追问。
访谈结束后,再从转写记录中提取结构化信息,交给招聘团队查看。涉及候选人能力评估和录用决定时,还需要适当的人工复核。
声网对话式AI引擎提供的实时语音交互、轮次判断、多轮对话和模型适配能力,可以用于构建此类访谈应用。企业需要自行设计具体问题、数据提取规则、信息保存方式及后续筛选流程。
在招聘场景中,还要特别关注不同口音、语言表达习惯和听力障碍可能造成的识别偏差。对于影响评估的关键信息,应允许候选人核对和更正。
五. AI外呼效果怎么评估?不能只看接通率
企业部署AI外呼后,首先能看到的通常是拨号量、接通率和平均通话时长。
但这些数字并不能完整说明Agent有没有完成任务。
一通销售电话持续了五分钟,客户最终没有留下任何有效需求信息;另一通电话只用了两分钟,却确认了购买计划,并成功安排产品演示。两者带来的业务价值可能完全不同。
招聘也一样。面试完成率很高,但如果多数回答都缺少必要信息,招聘人员还要重新联系候选人,AI并没有节省多少工作。
针对这些问题,声网曾联合美团、xbench推出VoiceAgentEval AI外呼智能体评测基准,覆盖客服、销售、招聘、金融、调研、主动关怀与通知六大业务领域、30个子场景。
其评估框架关注两个主要方面:任务流程遵循度(TFC)和通用交互能力(GIC)。
任务有没有做对、做完
任务流程遵循度关注Agent是否完成必要的信息收集、是否按照规定顺序执行操作,以及有没有遗漏关键步骤。
例如,客户要求改约演示时间,Agent是否确认了新时段?是否成功调用业务系统?有没有把未完成的预约误报为成功?
这些都可以成为测试用例。
对话过程是否顺畅
通用交互能力则关注多轮对话、响应延迟、打断、语音识别和合成效果等指标。
在声网对话式AI引擎支持的实时交互环境中,开发者可以把模型能力和实际通话体验结合起来考察,避免只凭文本问答的表现选择模型。
正式上线前,还应测试用户长时间沉默、突然插话、背景噪声、网络波动、业务接口超时等情况。对于主动外呼,用户拒绝联系后的名单更新及后续呼叫阻止,也需要作为独立测试项。
如果应用需要较高的并发量,还要关注任务队列、失败重试策略、会话状态和服务成本,避免测试环境中表现良好的Agent在实际业务高峰时出现大量异常。
六. 从能打电话,到真正完成工作
销售外呼和招聘面试看起来是两种业务,但都要求语音Agent在持续交流中获取信息,并根据用户的回答决定下一步操作。
有时它需要追问,有时需要等待,有时要调用业务系统,还有些情况必须转交人工。
声网对话式AI引擎提供了支撑这些交互的实时音频、语音处理、模型接入与对话控制能力,企业可以在此基础上连接电话系统和企业业务服务,进一步实现销售、招聘、回访等具体应用。
真正值得关注的指标,也因此从单纯的语音响应速度,延伸到了任务完成率、信息准确性、系统执行结果和用户体验。
对于企业来说,一通AI电话有没有价值,最后还是要看客户的问题是否得到处理、约定的事情是否真正完成,以及人工团队能否顺利接手后续工作。