社交元宇宙的技术挑战与探索

1. 社交元宇宙的技术挑战与探索 Soul App / 甘启 2022.09.27

2.

3. 目录大纲元宇宙社交场景 • 技术能力的探索 • 与用户的能力共创 • 元宇宙社交平台的畅想 •

4. 元宇宙社交场景

5. 敏捷智能沉浸想象

6. 匹配学校兴趣家庭合适的时间工作行为跨语言跨时间合适的对象关系跨空间 … 智能机器人

7. 交流面对面交互互动文字聊天 AR场景语音聊天 VR场景视频聊天智能助手

8. 学术&商务线下远程沉浸参与 Reference: 场景可配置形象可选择商务学术演讲授课会议讨论形式不受限 [1] https://www.youtube.com/watch?v=odbqlASYv9E [2] film 《Kingsman: The Secret Service》效果可触发 ... 安全可保障

9. 娱乐游戏购物旅行聚会 Reference: [1] Ge C , Song Y , Ge Y , et al. Disentangled Cycle Consistency for Highly-realistic Virtual Try-On[J]. 2021. [2] https://hado-official.com/ [3] film 《Ready Player One》 [4] https://www.dpm.org.cn/Home.html [5] https://www.huaweicloud.com/product/live/dspace.html ...

10. 人生里程碑升学婚礼葬礼 Reference: ... [1] https://www.mana.art/article/detail/1658914316562464684 [2] https://www.kunanji.com/redian/zatan/316116.html [3] https://www.designboom.com/technology/japanese-university-remote-controlled-robots-zoom-virtual-graduation-04-06-2020/ [4] https://www.ritualstoday.co.uk/virtual-funerals-honouring-a-life-in-times-of-covid-19/

11. 其他 Reference: [1] https://www.roadandtrack.com/car-culture/videos/a28918/player-two-short-film/ [2] https://www.youtube.com/watch?v=_exvAxUee4M [3] https://www.163.com/v/video/VEGOFNGMO.html

12. 技术能力的探索

13. 能力分析渲染图像推荐元宇宙社交 NLP 语音

14.

15.

16. CV能力三维重建人脸人体表情识别手部关键点属性识别 pose 估计场景生成人像分割风格化属性编辑素材生产深度估计平面识别宠物猫/ 狗关键点

17. 特效&渲染能力基础特效滤镜变形贴纸美颜美型美妆 PBR SSS Morph 动画骨骼动画灯光场景动画材质关键帧动画平移旋转缩放点光源平行光聚光灯 HDR 环境光全局光照

18.

19.

20. 开放式元宇宙场景

21. 体验层游戏化社交体验 S oulM e ta 意在通过构建以 3 D Ava ta r 数字身份为核心的多元数字生态，实现与用户共建的： “ 以Soul为连接的多终端社交元宇宙 ” 应用层沉浸式场景&虚拟形象核心引擎能力

22. 推荐系统——灵犀

23. 智能语音引擎--伶伦

24. 对话系统——仓颉

25. 与用户的能力共创

26. 内容&玩法个性化参与感技术赋能数据打通去中心化虚拟资产

27.

28. 技术赋能——便捷

29. 技术赋能——丰富设计素材编辑器道具功能用户感知

30. 虚拟资产购买实体化交易流通创造编辑

31. 元宇宙社交平台的畅想

32.

33. 硬件设备算力更强使用更易功能更广价格更低速度更快

34. 算法个性化多模态平台互通快速响应端云结合

35. 社交场景文字视频活动设备语聊游戏手表手机 VR 体感真实与虚拟共存的社交生态平台真人 + 虚拟人投影 AR 真实连接虚拟虚拟空间 NLP 渲染 CV 推荐语音 Reference: [1] film 《Alita: Battle Angel》技术能力

36.

37. THANKS