用人工智能技术打造虚拟生命

1. 用人工智能技术打造虚拟生命邵浩 Gowild狗尾草智能科技 1

2. 目录 · 聊天机器人困境及破局 · 虚拟生命核心技术及落地 · 工程实践中的其他问题 · 结束语 2 CREATE AI VIRTUAL LIFE FOR EVERYONE 2

3. 人工智能技术好牛 3

4. 聊天机器人好傻 4

5. Gartner技术曲线知识图谱通用人工智能 CREATE AI VIRTUAL LIFE FOR EVERYONE 5

6. NLP为什么这么难？ 1893 CREATE AI VIRTUAL LIFE FOR EVERYONE 6

7. 人是怎么对话的？上下文静态世界观静态世界观今天天气不错关系动态情绪动态情绪所处环境 CREATE AI VIRTUAL LIFE FOR EVERYONE 7

8. 时代vs入口 IT 时代互联网时代移动互联网时代 AI 时代 8

9. 聊天机器人体系框架客观话题闲聊聊天机器人情感表达被动交互任务对话事实型产品问答主动交互非事实型平台 CREATE AI VIRTUAL LIFE FOR EVERYONE 9

10. 三要素 AI三要素算法 Chatbot三要素人工算力数据数据算法 CREATE AI VIRTUAL LIFE FOR EVERYONE 10

11. 人工智能的人格化和IP化 11

12. 多模态交互 CREATE AI VIRTUAL LIFE FOR EVERYONE 12

13. 虚拟生命用人工智能技术模拟生命的主要特征，以多形态和多模态进行交互，具备强大的感知和认知能力，并进一步实现自我认知和自我进化 13

14. 人工生命：人造生命VS虚拟生命生物技术初音未来美国生物学家克雷格·文特尔制造生命的过程来源：John Lawson 14

15. 虚拟生命能力范畴人脸识别情绪识别看场景识别声纹识别听联想记忆思考自动作词自动谱曲说语音合成声纹迁移推理共情推荐表情语音识别动作自动舞蹈姿态 CREATE AI VIRTUAL LIFE FOR EVERYONE 15

16. 虚拟生命技术范畴基于图像人脸识别场景识别动作识别声学语音识别语音合成声纹识别歌声合成认知交互记忆推理联想对话姿态动作舞蹈日常生活表现人物建模人脸建模表情生成歌曲作词自动谱曲演唱认知的多模态交互具有生命感的表达 16

17. 语音技术：耳朵和嘴巴语音识别 CREATE AI VIRTUAL LIFE FOR EVERYONE 语音合成 17

18. 个性化语音合成前处理后处理 Encoder CREATE AI VIRTUAL LIFE FOR EVERYONE Decoder Vocoder 18

19. 后处理优化 19

20. 图像技术：眼睛和身体计算机视觉 3D重建 CREATE AI VIRTUAL LIFE FOR EVERYONE 20

21. 人脸+情绪识别高兴喜欢失落愤怒年龄: 幼年胡须: 无脸型: 圆型性别: 女眼镜: 无头发: 黑色直发人种: 欧美人耳环: 无帽子: 无项链: 无领结/领带: 无悲伤厌恶 21

22. 人脸重建光流估计输入照片人脸对齐人脸模型关键点模型纹理匹配 Shader 渲染 CREATE AI VIRTUAL LIFE FOR EVERYONE 降低面片输出 3 D 模型人脸纹理 22

23. 人脸快速重建 23

24. NLP技术：基本交互输入自然语言理解自然语言生成输出对话管理 Web 社区问答搜索引擎百科站点知识库 24

25. 问答正则模板库字典库 (.*)的股票代码是多少 (.*) 怎么开通怎样购买(.*) …… Query: 请问科大讯飞的股票代码是多少 reg = ‘(.*)股票代码是多少’ m = re.findall(reg,query) Location.txt Index.txt Firm.txt People.txt Broker.txt Concept.txt 请问科大讯飞科大讯飞 Trie Match { } “Firm”:“科大讯飞” ① 命中股票代码查询意图模板库中一条规则 ② 抽取文本中“科大讯飞”属于公司字典 ③ 因此回答股票代码查询结果：“科大讯飞的股票代码是002230” CREATE AI VIRTUAL LIFE FOR EVERYONE 25

26. 对话自然语言理解意图识别对话管理槽位填充 DST 自然语言生成槽位填充 DPO 加载上下文=无给我推荐十块钱以内的人工智能概念股票，要最近涨幅靠前的几个查个股查市场查基金查资讯时概价排间念格名最人十靠近工块前智钱能以内 CREATE AI VIRTUAL LIFE FOR EVERYONE 起始时间结概最最最束念低高低时价价排间格格名最高排名 4 月 8 日 4 月 1 2 日 1 人 0.1 10 10 工智能推荐结果好的，为您推荐4月8日到 12日，每股十元内的人工智能概念股票，涨幅前十位分别是：xxxxxx 26

27. 闲聊你穿的衣服好漂亮 Questions Retrieval 你的衣服真漂亮谢谢你的赞美我买了漂亮的衣服哇哦，我也想要 Retrieved QA Pairs Matching Matched Answers Ranking Ranked Answers Best Response 谢谢你的赞美 online offline QA Pairs 你的衣服真漂亮谢谢你的赞美我想为你摘星星你咋不上天呢无聊死了那我陪你聊天吧你有男朋友么没有啊我买了漂亮的衣服哇哦，我也想要你喜欢什么水果我最喜欢吃葡萄了你叫什么名字呢你可以叫我琥珀 Learning to match Learning to rank [Ji, et al. 2014] 27

28. Matching算法 Strong interaction models，或基于交互 Weak interaction models，或基于表达 ARC I [Hu, et al. 2014] CREATE AI VIRTUAL LIFE FOR EVERYONE MatchPyramid [Pang, et al. 2016] 28

29. 工程方案汇总 Jieba分词哈工大LTP FastText NLG NLU DM 配置意图解析任务对话功能问答闲聊基于检索规则 CREATE AI VIRTUAL LIFE FOR EVERYONE 技能包 DB QA库用现成的模板 CSV 29

30. 知识图谱：跨越感知和认知的桥梁 CREATE AI VIRTUAL LIFE FOR EVERYONE 30

31. 推理 CREATE AI VIRTUAL LIFE FOR EVERYONE 31

32. DIKW体系 CREATE AI VIRTUAL LIFE FOR EVERYONE 32

33. CREATE AI VIRTUAL LIFE FOR EVERYONE 知识应用问答推理联想推荐数据增强知识映射知识检索实体发现本体对齐实体消歧机器阅读百科 Schema 常识七律知识加工知识来源知识表示知识融合结构化关系抽取事件抽取半结构化实体分类非结构化属性分类 33

34. 流程结构化属性分类知识映射 Schema 实体分类知识补全知识扩展问答对话半结构化 Parser 百科实体发现非结构化关系抽取事件抽取 CREATE AI VIRTUAL LIFE FOR EVERYONE 数据增强知识表示知识融合常识知识检索实体链接推理联想推荐 34

35. KG Schema 事物人物科学家艺术人物 CREATE AI VIRTUAL LIFE FOR EVERYONE 地点诗人 ··· ··· 艺术油画戏剧歌剧京剧 ··· ··· 雕塑舞剧 35

36. KG Schema 5800+ 实体类别定义 2000+ 实体属性定义 32000+ 属性同义词 CREATE AI VIRTUAL LIFE FOR EVERYONE 36

37. 实体属性上下位配偶夫妻丈夫老公 CREATE AI VIRTUAL LIFE FOR EVERYONE 妻子夫君老婆内人 37

38. 数据来源互动百科 baike.com 38

39. 知识表示伊万卡美国女儿国籍特朗普职业政治家 RDF 川普职业商人妻子梅拉尼娅标签人物 <特朗普, 妻子, 梅拉尼娅> <特朗普, 女儿, 伊万卡> <特朗普, 别名, 川普> <特朗普, 国籍, 美国> <特朗普, 职业, 政治家> <特朗普, 职业, 商人> <特朗普, 标签, 人物> 。。 39

40. 知识补全丈夫朱丽倩刘德华妻子丈夫杜宪妻子陈道明杜宪陈道明妻子丁敏秋丈夫沈立丈夫郭芙蓉妻子吕轻侯费丽达程远妻子费丽达丈夫程远丈夫欧阳亭方灵姬妻子 40

41. 知识扩展实体层面实体知识图谱章泽天历任董事（实体层⾯面关系）嫩绿茶叶实体链接表述表述层面 CREATE AI VIRTUAL LIFE FOR EVERYONE 奶茶妹妹历任董事（表述层⾯面关系）嫩绿茶 4月3日，“奶茶妹妹” 卸任刘强东旗下“嫩绿茶”董事 41

42. 新知识发现互联网创业公司主营业务为P2V（PPT to VC）的企业。 CREATE AI VIRTUAL LIFE FOR EVERYONE 不满式创业又称为马斯克式创业，即因为对现状不满而创业，对什么不满，就创建一个公司改变它。 TMD 中国互联网新一代冉冉升起的三个新巨头的合称今日头条（T-头条），美团（M- 美团），滴滴（D-滴滴）。 42

43. 知识更新微博热搜 360 趋势百度风云榜增量更新知识源全量更新知识图谱 100万+ 日均更新实体 43

44. 问答狗尾草CEO的国籍是？实体关系实体发现狗尾草 CEO 国籍？分词词性标注资源映射 E:狗尾草 R:国籍 R:首席执行官 ?x 关系抽取实体链接 <?y, R:国籍, ?x> 句法分析语义组合语义组合查询生成回复生成 <E:狗尾草, R:首席执行官, ?y> NER SELECT DISTINCT ?x WHERE { ?y 国籍 ?x. res: 狗尾草首席执行官 ?y. } 中国 44

45. 理解用户：事件&关系抽取突然发现明天是我生日啊男恭喜，提前祝你生日快乐哦~ 哎没人陪我过啊，想要个女朋友摸头，琥珀会一直陪着你哦，送你大蛋糕蛋糕就算啦，我讨厌甜食是吗，琥珀可喜欢了，那下次你收到女孩子的巧克力就给我吃吧 01-19 性别生日情感状态单身用户甜食讨厌才艺吉他哈哈琥珀你真逗，我来弹个吉他给你听吧，也好久没练了。。。 45

46. 推理机儿子姓名：阿木性别：男姓名：文华性别：女母亲女儿 CREATE AI VIRTUAL LIFE FOR EVERYONE 奶奶姓名：丽丽性别：女 46

47. 规则推理QA 比较上海和江苏哪个面积大？上下位聚合全职高手的主演中哪个是歌手？苏大强的大儿子是谁？多跳 CREATE AI VIRTUAL LIFE FOR EVERYONE 射雕英雄传相关人物所处的时代是什么？ 47

48. 联想：歌曲推荐丝路稻香歌手喜欢歌曲喜欢歌曲用户喜欢歌曲屋顶喜欢歌曲歌手推荐歌曲周杰伦歌手告白气球歌手晴天 CREATE AI VIRTUAL LIFE FOR EVERYONE 48

49. 联想：信息提供飞机航空航天波音 737 多国停飞波音737 交通工具法拉利开法拉利卖红薯交通工具地铁纽约地铁老鼠乱窜 CREATE AI VIRTUAL LIFE FOR EVERYONE 49

50. 知识存储关系型数据库全文索引数据库 CREATE AI VIRTUAL LIFE FOR EVERYONE 内存型数据库 RDF图数据库文档型数据库原生图数据库 50

51. 构建知识图谱的成本 How much is a Triple? Estimating the Cost of Knowledge Graph Creation Heiko Paulheim Data and Web Science Group, University of Mannheim, Germany heiko@informatik.uni-mannheim.de CREATE AI VIRTUAL LIFE FOR EVERYONE 51

52. 高质量中文百科知识图谱：七律实体数 230,255,525 关系数 3,049,384,022 https://ai.gowild.cn/kg 52 http://www.openkg.cn/dataset/7lore

53. 音乐技术：表现 CREATE AI VIRTUAL LIFE FOR EVERYONE 53

54. 音乐技术：表现 CREATE AI VIRTUAL LIFE FOR EVERYONE 54

55. 虚拟生命的发展阶段虚拟生命1.0 计算机视觉、图像、声学等技术的整合，以被动交互为主可进行虚拟生命2.0 多模态技术的运用虚拟生命3.0 超越人类的综合感知能力单一数据源的推理及联想更自然的双向交互具备一定的自我认知能力海量知识的联合推理及联想建立对于用户的基本认知自我信息的完全认知完备的推理和联想对用户的全面认知具备自我意识人类水平的自然交互对个体及群体的完全认知 CREATE AI VIRTUAL LIFE FOR EVERYONE 55

56. AI虚拟生命的应用场景在智能家居领域，AI虚拟生命在多设备中存在，并进行互联，可以控制各种家电智能家居在教育领域，虚拟生命的形象和认知可以提升教育体验。知识图谱可以帮助个性化学习和推荐车载教育在娱乐领域，虚拟生命的形象赋能娱乐领域，提供更丰富的表现力在金融领域，虚拟生命可以让冷冰冰的机器人客服更加友好医疗娱乐在公安行业，结合知识图谱和自然语言交互，可以发现海量数据中的蛛丝马迹。在医疗领域，虚拟生命的形态、用户感知和情感交互非常适合养老医疗，及安全监控等其他功能公安 CREATE AI VIRTUAL LIFE FOR EVERYONE 金融在车载领域，虚拟生命可以互连多设备，了解用户行程，提供规划等 56

57. 多要素妥协卖什么卖给谁怎么卖产品 BOT 系统架构功能闲聊问答多模态交互 CREATE AI VIRTUAL LIFE FOR EVERYONE 性能成本软硬件人力市场 57

58. 商业模式额，我这学期讲课压力太大了，求夸。。。刘老师在科研和教学的业余时间，还来夸清华的同学们，真是太优秀了！总所周知，清华相当一部分老师上课都是走个形式，刘老师为教学质量牵肠挂肚，本身就已经超出了广大学生们对老师的期待更何况老师在各大社交媒体上已经充分证明了自己的学术素养与沟通能力，上台讲课也必然是手到擒来，虽然说略有紧张也是人之常情，但却是不必太过担心，时间自然会证明刘老师的课程的高质量、高水平、高回报 CREATE AI VIRTUAL LIFE FOR EVERYONE 刘老师不仅在学校孜孜不倦教书育人，还在知乎上为广大清华同学排忧解难，成为知乎大V中的楷模，刘老师辛苦了！ 58

59. 关于我们 Gowild 智能科技诞生 2013年12月完成A轮融资；发布逗B机器人”公子小白|青春版”, 与众明星亮相纽约时代广场 2016年06月 2016年01月面向年轻人的情感社交机器人“公子小白”发布，线上销量位居第一 CREATE AI VIRTUAL LIFE FOR EVERYONE ？琥珀·虚颜酷黑版上市 2017年09月 2016年07月 holoera×琥珀虚颜全球首款人工智能3D全息主机发布，二次元美少女琥珀· 虚颜生活在其中完成A+轮融资；发布虚拟生命第二代产品 2018年08月 2018年03月发布公子小白成长版二代；发布公子小白Pro版 2019年12月 2019年08月 Holoera+全职高手 59

60. 关于我们 Gowild人工智能研究院（上海）成立于2013年底，由多位业界技术专家发起成立，包括国内NLP首位杰青获得者张民教授，机器学习专家邵浩博士，知识图谱专家王昊奋博士，并汇聚美国俄亥俄州大学、日本国立九州大学、加拿大女王大学、苏州大学、浙江大学、华东师范大学等知名院校人工智能领域英才，专注于知识图谱构建、自然语言处理技术、机器自我认知等研究方向，推出Gowild AI Virtual Engine（GAVE）人工智能虚拟生命引擎，成功应用于Gowild出品的Holoera及公子小白系列产品。 CREATE AI VIRTUAL LIFE FOR EVERYONE 60

61. GAVE CREATE AI VIRTUAL LIFE FOR EVERYONE 61

62. The Learning Pyramid 真的是真相么？ 62

63. Gowild狗尾草智能科技 63