爱奇艺HomeAI智能语音交互系统

1 .AI CU G人 w ww 工 . 智 ai 能 cu 技 g. 王视鎏/爱奇艺 术 cn 社 区 

2 . 区 HomeAI介绍 术 cn 社 技 g. 语音视频搜索 能 cu 智 ai 新热内容支持 工 . ww G人 w 上下文和用户环境 视频内容理解 CU AI 1 

3 . 爱奇艺HomeAI 区 点直播搜索 术 cn 社 TV端 VR端 技 g. 智能识别 ASR 能 cu 智能跳转 智 ai 工 . TTS HomeAI NLP HomeAI ww 声音分析 NLG G人 w 影视问答 移动端 车载端 CU 百科问答 AI AI Pioneer 2 

4 .AI Pioneer 爱奇艺HomeAI AI CU G人 w ww 工 . 智 ai 能 cu 技 g. 术 cn 社 区 3 

5 . 区 HomeAI介绍 术 cn 社 技 g. 语音视频搜索 能 cu 智 ai 新热内容支持 工 . ww G人 w 上下文和用户环境 视频内容理解 CU AI 4 

6 . 语音视频搜索 •为什么要用语音进行视频搜索 区 术 cn •设备限制 社 •输入便捷 技 g. •特殊人群 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 5 

7 . 语音视频搜索 vs. 视频搜索 •新剧不断上映，剧名人名千奇百怪 区 术 cn •“声临其境” 社 •“都挺好” 技 g. 能 cu 智 ai 工 . •分类方式由用户决定 ww •“欧美电影” G人 w CU •上下文关联 AI AI Pioneer 6 

8 . 区 HomeAI介绍 术 cn 社 技 g. 语音视频搜索 能 cu 智 ai 新热内容支持 工 . ww G人 w 上下文和用户环境 视频内容理解 CU AI 7 

9 . 优化新剧处理 新近视频是用户点播重点 区 术 cn •中文特点 社 •同音字多 技 g. •分词歧义多 能 cu •现状： •各环节所用语言模型 智 ai •侧重不同 工 . •更新成本不同 ww •更新周期不同 •出错后 •不断放大 •后续模块无反馈 G人 w CU AI AI Pioneer 8 

10 . 优化新剧处理 •ASR 区 术 cn •热词替换，容易断章取义 社 •并行视频领域词图 技 g. 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 9 

11 . 优化新剧处理 •意图 区 术 cn •融入声学向量和实体类别表达向量 社 •提升同音词的泛化能力，容忍少量ASR错误 技 g. •有效处理未知词汇 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 10 

12 . 优化新剧处理 所有环节第一时间感知新剧、新明星 区 术 cn 社 技 g. 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 11 

13 . 区 HomeAI介绍 术 cn 社 技 g. 语音视频搜索 能 cu 智 ai 新热内容支持 工 . ww G人 w 上下文和用户环境 视频内容理解 CU AI 12 

14 . 多轮对话 •结果中选择 区 •“我想看奥特曼” -> “欧布” 术 cn 社 •错字纠正 技 g. •“搜索杨子” -> “紫色的紫” 能 cu •增加维度 vs. 新启对话 • 任意搜索条件有结果 智 ai •“我想看爱情公寓” -> “有没有电影” 工 . •“我想看中国新说唱” -> “有没有电影” ww G人 w CU AI AI Pioneer 13 

15 . 上下文关联 •上下文关联 区 •前向判断 – 根据话术 术 cn 社 •后向判断 – 根据结果 技 g. •综合考虑，结果倒推 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 14 

16 . 结果合理性评估 •先验概率 区 术 cn •热度、更新时间、评分等 社 •后验概率 技 g. •相关度 多 能 cu 智 ai 缺少信息 最佳结果 工 . ww G人 w 关键词被覆盖数量 少 无关结果 匹配度低 CU 覆盖的关键词数量 AI AI Pioneer 15 

17 . 用户语义受哪些因素影响 区 上下 术 cn 社 文 技 g. 能 cu 说话 智 ai 实体 语境 工 . ww G人 w内容 用户 CU 属性 AI AI Pioneer 16 

18 . 理解用户 •用户属性 区 术 cn •年龄、性别、口音 社 •年龄层检测 技 g. •性别检测 •方言检测 能 cu •历史记录、观影偏好 智 ai •声纹聚类，辨别家庭成员 工 . ww G人 w CU AI AI Pioneer 17 

19 .AI Pioneer 理解用户 AI CU G人 w ww 工 . 智 ai 能 cu 技 g. 术 cn 社 区 18 

20 . 理解用户环境 •设备能力 区 术 cn •是否有屏 社 •是否支持直播等 技 g. •UI状态 能 cu 在播视频 智 ai 搜索词 工 . ww 场景 注册 待选列表 G人 w 播放进度 CU AI AI Pioneer 19 

21 . 区 HomeAI介绍 术 cn 社 技 g. 语音视频搜索 能 cu 智 ai 新热内容支持 工 . ww G人 w 上下文和用户环境 视频内容理解 CU AI 20 

22 .AI Pioneer 视频内容理解 AI CU G人 w ww 工 . 智 ai 能 cu 技 g. 术 cn 社 区 21 

23 . 视频标签体系 •基础算法分析视频内容后，通过标签整合去重+高层语义分析，可得到视频/片段内容标签 区 术 cn 社 标 技 g. 签 整 合 基础标签整合去重 高层语义标签分析 能 cu 层 智 ai 工 . ww 视 频 标 人物识别 动物识别 场景识别 行为识别 表情识别 镜头分割 签 基 础 标 签 层 音 频 G人 w 文 本 标 音乐分类 BGM识别 动作识别 命名实体 台词关键词 台词话题 标 签 签 CU AI AI Pioneer 22 

24 . 创新应用 •基于视频理解 区 术 cn •只看他 社 •内容跳转 技 g. •智能快进 能 cu 智 ai 工 . ww G人 w CU AI AI Pioneer 23 

25 . AI CU G人 w ww 工 . 智 ai 能 cu 技 g. 术 cn 社 区 24