AWS 中国峰会 · Breakout Session · Amazon Web Services × Agora
被记住 ·
被托付。
对话式智能体的物种分化与同源进化
场合
AWS 中国峰会 · 上海世博中心
日期
2026.06.23
讲者
姚光华 Colin + 史沅昊 Yuanhao
形式
与 AWS 解决方案架构师联合 Session
全场主线 · THE ARC
02
这场在讲什么
两个物种,一颗引擎。
对话式智能体
消费级 · 被记住
让 AI 像人 —— 用户第二天还想找它说话
企业级 · 被托付
让 AI 像系统 —— 法务敢签、SLA 敢赔
SAME DNA · TWO FORMS —— 形态截然不同,底下是同一颗引擎
这场演讲把两个半球合成一张地图:
先讲分化(它们为什么长得不一样),再讲同源(它们为什么共用一份工程)。
序幕 · RTE LEADER
03
序幕 · 我们站在哪组数字上说话
站在 900 亿分钟生产数据上。
900 亿+
单月支撑通话分钟数 · RTE 行业领导者
声网 / Agora · 2026.Q2 内部统计
2024.10.01
OpenAI 选择声网 RTE 网络,承载实时语音 API 全球落地
A QUIET ENDORSEMENT
同样的工程能力,今天我们用来支撑你的企业级智能体,也用来支撑你的消费级智能体。
The same engine that powers OpenAI's Realtime API — now powers both species of your Agents.
后面这些判断,都站在这组数字上面做出来。
同源 DNA,驱动两个物种。
ACT 01
SPECIATION
物种分化
2024 年我们用「陪伴 / 服务」描述两个方向。2026 年该换一套更准的语言:这是一次物种分化。
01 分化
02 被记住
03 被托付
04 同源
05 云上
元分类升级 · UPGRADED
05
对话式智能体的元分类
两年过去,这个分类要换更精准的词。
2024 年的原始定义
2026 年的精准定位
陪伴智能体
服务智能体
消费级智能体
COMPANIONSHIP · PROSUMER
企业级智能体
SERVICE · ENTERPRISE
AN EVOLUTIONARY VIEW · ONE SPECIES, TWO NICHES, TWO FORMS
换词不是换包装。
是因为这两条路从这里开始,要按完全不同的标准验收。
物种分化 · SPECIATION
06
演化生物学视角
不是两种产品,是一个物种的两种形态。
消费级智能体
生态位 · 家庭 / 个人 / 硬件
形态 · 像人
REMEMBERED · 被记住
企业级智能体
生态位 · 客服 / 外呼 / 企业系统
形态 · 像系统
ENTRUSTED · 被托付
一个物种 · 两个生态位
同源 DNA · 同一颗引擎
NOT TWO DIFFERENT PRODUCTS —— ONE SPECIES, TWO ECOLOGICAL NICHES, TWO FORMS
二元拱顶石 · CORNERSTONE
07
对话式智能体的新定位
让 AI 像人,还是让 AI 像系统。
COMPANIONSHIP / PROSUMER
消费级智能体 —— 让 AI 像人
成功标准是「被记住」。用户第二天愿不愿意再找它说话。
SERVICE / ENTERPRISE
企业级智能体 —— 让 AI 像系统
成功标准是「被托付」。法务敢签、风控敢过、SLA 敢赔。
二者底层,是同一个引擎。
Consumer agents make AI feel like a person. Enterprise agents behave like a system. Beneath both — the same engine.
MONEY QUOTE · 01 · 拱顶石
消费级是被记住,
企业级是被托付。
这不是两种不同的产品 —— 是同一个物种,在两个生态位下分化出的两种形态。
ACT 02 · 物种一 · 半球一
REMEMBERED
被记住
消费级智能体 · 让 AI 像人。先看这个半球最疼的那道伤口:3 天,就被扔进抽屉。
01 分化
02 被记住
03 被托付
04 同源
05 云上
3 天剧本 · A 3-DAY SCRIPT
10
一个 3 天的故事
留存曲线的形状,只有三天。
01
开箱
「哇它会说话!」新鲜感拉满,朋友圈发了三条。
02
聊半小时
问它能干嘛,它一口气讲了 30 件事。还行。
03
逗一句
没了下文。对话越来越像在背词卡。
04
抽屉吃灰
下次拿出来是搬家。这是当前 9 成消费级 AI 硬件的留存形状。
21% 用户对当前 AI 产品的使用满意度 · 45% 糟糕体验之后的用户流失率。
Deepgram & Opus Research · 2025
更大的模型、更快的响应、更多的功能 —— 但留存曲线没有改善。
真正的分水岭 · THE REAL DIVIDE
11
玩具 VS 伙伴
分水岭不是智能,是角色。
TOY · 功能盒子
是一组功能
用户预期即用即走 · 越玩越无聊 · 留存陡降归零。
COMPANION · 被赋予角色的存在
是一个角色
用户预期持续相处 · 越熟越有意思 · 留存缓升稳住。
当前 9 成 AI 硬件卡在哪?
它们是「装了 LLM 的功能盒子」,不是「被赋予角色的存在」。
四个非伙伴症状 · FOUR FAILURE MODES
12
4 SYMPTOMS → 4 COMPONENTS
4 个症状,对应 4 个组件的失败。
① IDENTITY
身份漂移
上午像客服,下午像哥们,晚上像心理医生。
② + ③ MEMORY
记忆失忆
你昨天说妈妈生病了,它今天问你「天气真好对吧」。
④ SPATIAL
临场缺席
你叹气时它在念叨;你在客厅,它的注意力在卧室。
④ TEMPORAL
节奏失控
你说一半它抢话,你问完它愣 2 秒,语调永远 happy。
① 身份 ② 关系 ③ 历史 ④ 临场(空间 + 时间)——
被记住这半球的全部工程,都挂在这 4 个组件上。
① 身份 · IDENTITY
13
① IDENTITY · 它是谁
身份不是它记得自己叫什么,是它记得你是谁。
不是一句 system prompt,也不是给它起个名字。
是一套可以被它一致表达出来的存在。
01
语调
TONE · 独特的语调,不只是音色。温和、慢半拍。
02
反应模式
PATTERN · 一致的反应模式。先共情,再问,再答。
03
喜恶
TASTE · 鲜明的喜恶。怕吵 · 喜静。
04
边界
BOUNDARY · 稳定的自我边界。不假装它是人。
工程上是 persona embedding + 微调 + 一致性兜底。
产品上只有一句话:先想清楚,你要造的是哪一个「它」。
② 关系 · ③ 历史
14
② RELATIONSHIP · ③ HISTORY
关系的容量,等于共同记忆的容量。
DAY 1 · 浅
你告诉它,猫叫「豆豆」。
第一次对话里的一个事实。
DAY 30 · 中
它主动问「豆豆最近怎么样」。
主动召回,开始有关系。
DAY 365 · 深
它知道豆豆爱吃哪个牌子。
长期共同历史,不可替代。
三层记忆 · MEMORY STACK
SHORT TERM
本次对话上下文 · context window
MID TERM
本周 / 本月主题汇聚 · RAG · summary
LONG TERM
画像 / 关键事件 / 偏好 · 结构化存储
历史不是录音,是从录音里长出来的、对你的理解
音频是耗材,语义是资产。
关系容量曲线 · CAPACITY CURVE
15
关系容量的三级跳 × 物理上限
伙伴感,可以被一个数字量化。
0.29 TB · 物理上限
工具
智能音箱「你叫醒我」
熟人
记得几个偏好的 AI 玩具
伙伴
填满生命上下文配额
关系容量
共同记忆
一生听 10 亿词 → 只有 25% 值得记 → 折成 3.2 年音频 → 装进 0.29 TB。
这是一个人一生中真正值得被保存的「生命上下文」上限,也是机器人成为伙伴的记忆配额上限。当前 9 成消费机器人卡在工具和熟人之间。
MONEY QUOTE · 02
没有共同历史的机器人,
永远是陌生人。
身份不是它记得自己叫什么,是它记得你是谁。关系的容量,等于共同记忆的容量。
中心论点 · 3 ROLES + 1 ENGINE
17
伙伴感的工程结构
角色三件套,加一个引擎。
角色三件套 · CHARACTER TRIO —— 产品方的责任,厂商自己来
① IDENTITY
身份
它是谁?为什么存在?
② RELATIONSHIP
关系
它和用户是什么关系?
③ HISTORY
历史
共同记得什么?
承载在 · CARRIED BY
④ REAL-TIME ENGAGEMENT · CONVOAI ENGINE —— 技术方的责任
实时互动引擎
让身份、关系、历史,在每一次对话里被感知 · 被表达 · 被记住。
临场感 = 实时听见 × 立刻想起 × 当下回应 —— 落点是交互
这是一道二选一都不行的题。
ACT 03 · 物种二 · 半球二
ENTRUSTED
被托付
企业级智能体 · 让 AI 像系统。换到另一个生态位,验收标准整个换了一套。
01 分化
02 被记住
03 被托付
04 同源
05 云上
体验 GAP · POLARIZED
19
当前电话客服智能体的体验
两极分化,而且分得很开。
21%
用户对 AI 客服满意
Deepgram & Opus Research · 2025
45%
糟糕体验之后流失
400 位北美商业领袖调研
智利电话客服真实录音 · SERNAC · 2025
「别像计算机一样和我说话。」
客户在抱怨「别像计算机」—— 但他根本没意识到,自己正在跟计算机说话。
这是一个 Good Case。
电话智能体的天花板是:用户根本不需要分辨。
图灵测试 · QUIETLY PASSED
20
客服 Agent 真实生产数据
电话智能体,已经悄悄迈过门槛。
96.5%
通过图灵测试。基于 1,170 通真实有效对话,仅 3.5%(86 通)被用户明显感知为 AI。
ConvoAI 真实生产数据
接听
2,475 · 100.0%
真人接听
2,180 · 88.1%
有效对话
1,170 · 47.3%
感知为 AI
86 · 3.5%
86 通「明显感知」的九维信号拆解里,情绪 / 重复 / 不耐烦一项就占 60 通 —— 多数「识破」来自不耐烦,而不是听出机器音。
MONEY QUOTE · 03 · 1950 → 2026
76 年前,图灵问机器能否骗过人类。
今天,96.5% 的用户已经分辨不出。
In 1950, Turing asked: can machines fool humans? 76 years later — 96.5% can no longer tell.
营销战场 · 2× 超越
22
真实生产数据 · 日均营销转化率
AI 电话智能体,已经超越真人销冠。
行业最佳人工
1.5% —— 受过良好培训与管理的一线销冠,行业天花板
ConvoAI
3.08% —— 真实生产数据
2.05×
AI ÷ 人 = 2.05 倍 · 日均营销转化率 · CONVOAI 电话智能体生产数据
不再是「AI 能否替代人工」的问题。
是「人工能否追上 AI」的问题了。
五维金标准 · GOLD STANDARD
23
不做会出什么事故 → 我们用什么兜底
企业级智能体必须做的 5 件事。
01
运行时
数据串租户 / 突增拖垮邻居 / 海外扩容等几周 → 全球 SD-RTN 200+ 节点 · RTE 30000+ 终端适配
02
记忆
5 轮就忘订单号 / 检索 1–2 秒节奏崩 / 知识更新慢念旧政策 → 毫秒级分层记忆 RAG 端到端
03
安全
法务风控签不了字 / 监管要审计日志拿不出 / 海外数据驻留违规 → 99.99% · SOC 2 / GDPR · SLA 赔付
04
工具
说了「改地址」其实啥也没改 / 出错无法回滚 / 协议私有接一个重写一次 → MCP + Function Call
05
弹性
双 11 / 春节直接挂 / 单供应商挂服务全挂 / 没 SLA 赔付损失不赔 → 900 亿分钟 RTE 月均支撑
这五件事没有一件跟「模型多聪明」有关。
它们全都是「出事了谁负责」。
MONEY QUOTE · 04
5 件事少做一件,
就不算企业级。
被记住看的是「第二天还想不想找它」,被托付看的是「出事了谁赔」。这是两套完全不同的验收。
ACT 04
EVOLUTION
同源进化
两个物种长得完全不一样。但把壳掀开,底下是同一段 DNA、同一颗引擎。
01 分化
02 被记住
03 被托付
04 同源
05 云上
一颗引擎,两个出口
26
对话式 AI · 产品线架构
一颗引擎,上接被记住,下接被托付。
入口层 · ENTRY
客户端 APP(RTC) / 智能硬件(RTSA) / 传统电话(PSTN · SIP)
传输层 · SD-RTN
全球 200+ 节点 · 毫秒级实时网络
引擎层 · CONVOAI CORE
AI VAD · 优雅打断 · 注意力锁定 · 抽帧截图 · 降噪 · 回声消除
模型层 · MODELS
ASR / LLM 单模与多模 / TTS 音色复刻 / 数字人
STUDIO · ENGINE · BENCHMARK · CALL AGENT · ROBOTICS 1 —— 5 件套覆盖两个半球
两条能力线 · TWO TRACKS
27
被记住要什么 · 被托付要什么
上面两条线不同,下面这层是同一份工程。
被记住 · REMEMBERED —— 消费级要的能力
身份一致
长期记忆
临场节奏
个性表达
同一颗引擎 · 共享底座
低延迟 · 抗噪听清 · 优雅打断 · 多模态时间轴 · 级联可观测可兜底
被托付 · ENTRUSTED —— 企业级要的能力
多租户隔离
审计与合规
工具可回滚
SLA 可赔付
两条能力线不同,但底下这一层是同一份工程 —— 这就是同源进化
工程问题 #1 · LATENCY
28
ENGINEERING PROBLEM #1
对话感,死于等待。
GREEN · 活人感
0–200 ms
面对面对话的理想区间,大脑听不见任何延迟。
YELLOW · 可接受
≈ 400 ms
电话区间。人在做延迟补偿,开始消耗注意力。
RED · 关系破裂
≥ 1.5 s
不再是对话,是在等系统反应。伙伴感碎,托付也碎。
任何一个工程环节多 200 MS,都是在杀死伙伴感、打破托付
SOTA · OPENAI TOLAN: P90 < 1.5S
延迟在消费级是关系指标,在企业级是履约指标。同一条曲线,两种代价。
工程问题 #2 · #3
29
ENGINEERING PROBLEM #2 · #3
毁掉对话的不是噪声,是人声。
01
稳态噪声
STATIONARY · 空调、风噪、机械持续运行 —— 已解决。
02
瞬态噪声
TRANSIENT · 敲击、关门、犬吠 —— 部分解决。
03
非对话人声
NON-TARGET HUMAN · 电视、家人、路人、同事 —— 致命。
PARALLEL FUNCTIONS · 多功能并列
语音 / 视觉 / 传感器各跑各的
三条时间轴,谁也不知道对方发生了什么。
WOVEN ON ONE TIMELINE · 多模态编织
声 · 视 · 触在统一时间轴上同步
你叹一口气:同时看表情、判断你在哪儿,然后转头问「怎么了」。
选择性注意力锁定 + 十年 SD-RTN 的时间轴对齐 —— 这两件事都不在模型里。
工程问题 #4 · ARCHITECTURE
30
ENGINEERING PROBLEM #4
敢商用,才是架构的底线。
为什么我们坚持级联架构,不选端到端?
01 · OBSERVABLE
可观测
每一段延迟、每一个失败点,都能被定位。
02 · TUNABLE
可调优
ASR / LLM / TTS 可以独立替换、独立升级。
03 · RESILIENT
可兜底
出问题的时候,系统不会整体失控。
在消费机器人和企业客服里,稳定性本身就是用户体验。
一次失控的对话,比 10 次平庸的对话更伤关系。
MONEY QUOTE · 05
模型决定能力上限。
引擎决定体验下限。
MODELS SET THE CEILING. ENGINES SET THE FLOOR. —— 在对话即交互的时代。
ACT 05 · 与亚马逊云科技联合
ON AWS
云上兑现
世界观讲完了。这一段是工程支柱:低延迟推理、弹性扩缩、多模型统一,以及一次全球峰值重保。
01 分化
02 被记住
03 被托付
04 同源
05 云上
SOLUTION A · 推理延迟优化
33
POWERED BY AMAZON WEB SERVICES
把模型推理压回活人感区间。
NEED
目标 < 200 ms
要稳定落进「活人感」理想区间,模型推理这一段不能拖后腿。
WITH AWS
EC2 G6e + vLLM
单卡承载完整模型,vLLM 做框架级推理加速。
TOGETHER
推理延迟 4× 优化
稳定落入活人感区间。
注:SD-RTN 实时网络区域内延迟 < 40 ms,与模型推理是不同环节、独立叠加,不能混算成同一个数。
这条链路上,谁多花 200 ms,谁就在杀死对话感。
SOLUTION B · C
34
弹性扩缩容 · 多模型统一
扛得住峰谷,换得动模型。
SOLUTION B · 弹性扩缩容
实时对话流量有明显峰谷
EC2 / EKS 承载引擎,Auto Scaling 按指标自动扩缩,ALB 做负载均衡,CloudWatch 做延迟 / 吞吐 / 错误率全链路监控。
结果:
从容应对峰值,资源高效利用。
SOLUTION C · 多模型统一
一个网关,统一多模型
Amazon Bedrock 接入 Claude(复杂推理 / 高质量对话)、Nova(图文 / 成本优化)、Nova Sonic(语音输入输出 / 低延迟),LiteLLM 做统一 API 与路由。
结果:
灵活切换,不被单一模型绑死。
供应商可替换,是企业级的底线之一,不是加分项。
RESULT · PRODUCTION AT SCALE
35
MrBeast 超级碗直播
全球峰值,是这么扛下来的。
1 亿+
全球在线观众
REACH
640
EC2 C6a 实例 · 跨 4 大洲多 Region
SCALE
472 TB
峰值日出站流量
PEAK
5 min
全程响应 + 现场保障
SUPPORT
Global multi-region EC2 C6a · capacity planning + event support。
企业级不是在 PPT 上写「高可用」,是有人在那个晚上守着。
带走 · TAKEAWAYS
36
如果只带走一页
三句话,判断你在哪个生态位。
1
先认生态位
你要的是被记住,还是被托付?两套验收标准,选错了后面全错。
2
角色自己握,引擎交出去
身份 / 关系 / 历史是你的产品资产。临场引擎交给专业的人做。
3
企业级那五件事一件都不能少
运行时 · 记忆 · 安全 · 工具 · 弹性。少做一件,就进不了采购流程。
两个物种,一颗引擎。
你选哪个生态位都可以,但别把两套标准搞混。
MONEY QUOTE · 06 · 收口
把对话式智能体,
从 Demo 做成 Production,
从玩具做成伙伴。
被记住,被托付 —— 两个物种,同一颗引擎。
谢谢
被记住 ·
被托付。
姚光华 Colin · 声网 AI 产品线负责人
场合
AWS 中国峰会 · 上海世博中心
日期
2026.06.23
相关档案
15_2026-06-23_AWS中国峰会_被记住被托付
说明
据 40 页动效版重构 · 已剔除 2 页纯视觉页
EDIT
浅底