客户背景
党的十八大以来,中央多次就应急管理工作做出重要指示:要求坚持以防为主、防抗救相结合,全面提升综合防灾能力;坚持生命至上、安全第一,完善安全生产责任制,坚决遏制重特大安全事故。
面对新形势新任务新要求,某市应急管理局紧紧抓住应急管理事业改革发展的重大战略机遇,拓展危险化学品监测联网范围,加快推进烟花爆竹生产批发经营、非煤矿山、工贸重大危险源等企业监测联网,提高监测预警能力、监管执法能力和辅助指挥决策能力。建设感知网监测联网平台,实现安全生产企业感知监测数据统一接入、视频数据统一接入、物联监测数据本地存储和视频智能分析。
业务挑战
1、对某市辖区内上万安全生产企业,上百万传感器产生的物联网实时监测数据和视频监控进行集中汇总、统一管理;
2、能对该市物联网实时监测数据进行实时计算分析,判断是否存在未知风险,并进行提前预警;
3、实现海量物联网实时监测数据的实时共享交换,能实时将物联网实时监测数据上推至省应急管理厅,同时能下放至区、县级应急监管部门;
4、实现海量物联网实时监测数据一年以上的本地存储;
方案简介
针对客户需求,我们采用以三节点的MemFireDB分布式数据库集群为核心的解决方案,来解决客户海量实时监测数据的实时计算分析、实时共享交换和本地长期存储。
安全生产企业前端传感器和监控摄像头将采集的实时监测数据和视频数据汇聚至物联网主机,物联网主机将汇聚的实时监测数据加密后通过政务网和互联网上传到实时数据接收程序,实时监测数据接收程序将数据直接存储到MemFireDB数据库集群。实时监测数据和视频监控数据推送给风险计算模型后,风险计算模型对数据进行处理后产生告警数据直接存储到MemFireDB数据库集群。
3节点的MemFireDB数据库集群提高对于故障判断的准确性,数据副本存储,满足集群节点间的冗余,任意单节点宕机,业务正常可用。MemFireDB数据库集群主要用来存放感知网上传的原始感知数据和实时告警数据,从各个企业收集安全生产相关的感知设备数据,为百亿级别海量感知数据提供历史秒级查询,和长期存储需求,为安全生产风险、告警情况历史趋势分析提供数据支撑。
客户收益
1. 实时高效数据处理
汇聚省应急厅辖区内安全生产企业的200万个传感器数据,提供每秒十亿级别的运算能力,实现数据的毫秒级传输、实时分析处理和监测预警,为应急管理提供高效实时的监测预警结果。
2. 灵活高效、弹性伸缩
平台采用计算存储分离架构,亦可轻松调整节点规模,解决传统关系型数据分库/分表所带来的困扰,满足业务增长的需求;
单个集群支持100个节点规模,系统性能随集群规模线性增加;
3. 高可靠性、高可用性
采用raft协议来实现集群内部同步复制,保证多副本数据之间的一致性,跨集群采用异步复制方式;
单个节点故障不影响系统正常使用,在磁盘、节点、机架、区域故障的情况下提供持续的数据可用性;