南京线网指挥中心—mpp&hadoop架构大数据平台-k8凯发体育

南京线网指挥中心，是首个采用mpp hadoop混搭架构搭建的线网大数据指挥中心。借助京投亿雅捷大数据应用平台以及大数据技术、物联网及数据挖掘技术，建设的大数据平台，旨在提升南京地铁线网的安全性、可靠性及服务水平，实现多线路之间的互相配合。并作为南京地铁各线路的协调、应急指挥中心，负责协调不同线路的控制中心，与控制中心系统互联、互通，实现对各线路的综合监视和协调，为乘客提供更优质的服务。此大数据平台建设依托南京市轨道交通网络运营控制中心各线路occ（含信号、综合监控、视频监控等系统）、acc等业务平台系统及其他业务系统，结合网络化运营管理和分析决策需要，对轨道交通全线网的客流、行车、设备等数据进行分析、挖掘，满足ncc对于线网运营监控及协调管理、运营生产评估、指标分析、应急处置、客流预测、信息服务、运输计划优化评估等多种需求。

该平台使用kafka进行实时数据采集与分发，离线数据通过datastage进行采集， etl任务通过sequence序列作业调度加载数据到mpp。hadoop主要对实时数据、历史数据、非结构化数据存储，mpp存储即时性和指标以及报表数据。mpp与hadoop是通过etl工具组件file connector / big data file或者cdc进行数据互通的。

应用系统截图：