用 EMQ 生态打造全连接的统一数据空间基础设施
如果无法正常显示,请先停止浏览器的去广告插件。
1. EMQ :全连接时代的数据基础设施
Data Infrastructure for IoT
Jaylin
EMQ X Solution VP
2.
3. About Me
•
•
余杰霖,EMQ 解决方案VP,边缘计算研发总监。
曾于联合国 ESCAP 负责 GIS 数据分析工作,于
MSNCom 发表过边缘计算相关论文,后一直从事
IoT 架构和边缘计算相关工作,完成依威能源大规
模分布式充电桩系统和私有云的架构开发和运维,
首创将边缘计算理念应用于新能源。
自我评价是个热爱开源,软硬兼施的开发者。现负
责 EMQ 边缘计算研发和IoT解决方案,发起
NanoMQ 开源项目。
4. • EMQ:开源物联网数据基础设施软件供应商
• 物联网时代数字化转型趋势
• 物联网全连接时代数据的范式变化
• 从 Cloud Native 到 IoT Native的架构设计
• 面向物联网全连接时代的数据基础架构功能特点
• 数据在边缘 :边缘计算的挑战
• 全连接时代的物联网数据基础设施
5. EMQ:开源物联网数据基础设施软件供应商
6. EMQ:开源物联网数据基础设施软件供应商
• 面向 IoT & 5G 市场,商业开源软件公司
• 开源物联网消息服务器和流处理数据库
• 实时数据移动、流处理与分析解决方案
• 服务产业数字化、实时化与智能化转型
IoT & 5G
开源
消息
边缘
流处理
云端
7. 全连接时代
边缘与分布式云
异构设备与协议
云原生应用
Store
Produce
Aggregate
s
Connect
Distribute
Aggregate
s
Analyze
8. 物联网时代数字化转型趋势
从云转型到云原生
从云计算到边缘计算
从边缘计算到分布式云
数据的生产主体从“人类行为”到“机器状态”
9. 物联网全连接时代数据的范式变化
• 数据生产主体:从人类行为到物理状态感知与记录
• 数据产生:从有波峰波谷到稳定持续产生
• 数据类型:从交易事务型表数据到实时分析型流数据
• 数据体量:从 TB 时代到 PB/EB 时代,总量是ZB级别
• 数据处理:从 批处理到实时流式计算,Schema on Read
10. 从 Cloud Native 到 IoT Native的架构设计
•
IoT-Oriented/Native Software 架构设计原则
• 移动计算优先 • 全场景可适配
• 数据流可重用 • 分布式云原生
11. Unified Namespace – 统一数据命名空间
12. 面向物联网全连接时代的数据基础架构功能特点
统一数据命名空间的功能要求
持续稳定的海量超高并发连接 超低延时的有状态流式处理与分析数据
全链路端到端双向多QoS支持 流虚拟化与Schema级多租户
13. EMQ X - 物联网设备接入与 MQTT 消息服务平台
• 弹性、可靠、多协议,连接物联网设备
• 实时移动、分发与处理物联网核心数据
• 基于规则引擎的低代码数据处理与集成
• 基于云原生分布式架构的跨云多活部署
• 连接未来各行业数十亿关键物联网设备
14. HStreamDB - 为物联网数据实时处理而构建的流数据库
• 开创全新数据库类型
• 存储与计算分离架构
• 移动计算与实时分析
• 未来企业核心基础软件
15. 数据在边缘 :边缘计算的挑战
边缘异构设备和协议的接入
边缘数据缺乏互操作性,消息模式/数据格式碎片化
云边协同困难,需支持计算卸载转移
软硬双生:能耗与性能需平衡
16. Status quo of
Heterogeneity
边缘计算卸载
边缘硬件平台趋势
17. Neuron - 物联网边缘工业协议网关软件
•
Neuron 是一款边缘工业协议网关软
件, 支持一站式接入数十种工业协
议,并转换成 MQTT 协议 接入云端工
业物联网平台。适用于在各种网关硬件
部署,用于构建工业物联网平台,无需
容器框架,Neuron 2.0 版本占用超低
资源,对X86、ARM、MIPS、RISC-V
等架构支持。
18. NanoMQ - 超轻量边缘 MQTT消息服务器
•
•
NanoMQ 是面向边缘计算场景的下一代超轻
量级高性能 MQTT 消息服务器,致力于为不
同的边缘计算平台交付简单且强大的消息总线
服务。NanoMQ 基于 NNG 异步 IO 和多线程
模型以及 NNG 出色的网络API设计,只需原
生POSIX API即可运行,兼顾性能和兼容性/
易移植,基于Actor编程模型设计,在边缘设
备和 MEC 提供更好的 SMP 支持和更高的性
能,为未来的边缘计算应用提供支撑。弥合边
缘硬件和云端的架构差异,连接物理世界与数
字智能。
赋予边缘消息汇聚再分发能力,解决了边缘端
接入层的海量并发问题,进而为边缘计算应用
开发提供便利。
19. LFEdge eKuiper - 轻量边缘流式处理引擎
• eKuiper - 基于 SQL 超轻量级边缘流式
数据处理引擎,将云端实时流式计算
框架(比如Apache Spark 和 Apache
Flink 等)迁移到边缘,运行在资源受
限的边缘设备,以 10MB 的初始运行
内存,支持 10k/s TPS 毫秒级实时数
据处理与分析。
• eKuiper 使得边缘端的流式数据的
处理和分析变成可能,让 AI 智能更
靠近计算和数据发生的地方,方便用
户开发更实时更省流的边缘计算应
用。配合NanoMQ能够完成边缘端
的计算任务识别,分割和卸载。
20. Data Infrastructure for IoT 开源产品架构组合
•
从应用优先到数据优先,以数据为核心融合 IoT 数据与传统 TP 数据,实现云边端统一实时数据「连接、移动、
存储、处理与分析」,实现从数据产生到数据变现的闭环,缩短数据变现的周期,降低数据变现成本,助力企业
构建面向未来的物联网关键业务应用。
21. 连接 – Connect
•
弹性可靠多协议,连接海量物联网设备
• 1. 云原生物联网协议大并发连接
• 2. 跨行业协议云端一站式接入
• 3. 行业末端的云边端一体化连接
22. 移动 - Move
•
实时消息引擎,双向数据移动与分发
• 1. 云端海量数据吞吐
• 2. 设备到云端稳定可靠的双向移动能力
• 3. 云边端数据打通与边缘数据移动自治
23. 处理 – Process
•
云边协同的多级数据一站式实时处理
• 1. 云端海量数据实时处理与集成
• 2. 边缘端本地低时延快速处理
• 3. 云边数据处理统一管理
24. 分析 - Analyze
•
• 1. 实时数据洞察
• 2. 风险分析与预警
• 3. 数据分析生态集成
实时数据分析与业务洞察,即刻决策
25. 云边端统一物联网数据「连接、移动、处理与分析」
全球领先的 MQTT 消息服务器和流处理数据库,实现从边缘到云的一站式物联网数据「连接、移动、处理、存储与分析」
26. 全连接时代的物联网数据基础设施
27. From Data to Insights
28. Connect the Future of IoT with
EMQ
•
以 IoT「数据」价值最大化为目标,构建为IoT「数据」特征而设计基础软件,推进企业与社会的联网化、数字化、实
时化、智能化转型进程。
29.
30.