重载铁路运输大数据分析平台架构设计研究

doi:10.3969/j.issn.1673-4440.2023.11.008

铁路通信信号工程技术 ›› 2023, Vol. 20 ›› Issue (11): 44-49.DOI: 10.3969/j.issn.1673-4440.2023.11.008

重载铁路运输大数据分析平台架构设计研究

宋宗莹¹，王文斌¹，刘子扬²，周瑾²，刘永壮²

1．中国神华能源股份有限公司，北京 100011；
2．北京全路通信信号研究设计院集团有限公司，北京 100070

收稿日期:2023-06-26 修回日期:2023-11-09 出版日期:2023-11-24 发布日期:2023-11-25
作者简介:宋宗莹（1982—），男，正高级工程师，博士，主要研究方向：铁路运输管理，邮箱:10000372@chnenergy.com.cn。
基金资助:
中国神华重载铁路运输大数据分析平台研究项目（SHGF-22-02）

Design and Research on Architecture of Big Data Analytics Platform in Heavy-haul Railway Transportation

Song Zongying¹, Wang Wenbin¹, Liu Ziyang², Zhou Jin², Liu Yongzhuang²

1. China Shenhua Energy Co., Ltd., Beijing 100011, China;
2. CRSC Research & Design Institute Group Co., Ltd., Beijing 100070, China

Received:2023-06-26 Revised:2023-11-09 Online:2023-11-24 Published:2023-11-25

摘要/Abstract

摘要： 为解决重载铁路运输组织中积累的大量业务数据在分析能力、应用深度和数据创新方面不足的问题，推进大数据技术在重载铁路运输领域的应用，提出重载铁路运输大数据分析平台设计方案。在分析重载铁路特点的基础上，提出基于Hadoop和MPP混合架构的重载铁路运输大数据分析平台框架结构，设计大数据平台的应用架构与技术架构，并介绍平台的关键技术与业务应用。目前已经开展了基于该设计方案的重载铁路大数据分析平台的搭建和运行。

关键词: 重载铁路, 大数据, 混合架构, 领域建模

Abstract: In order to solve the problem of insufficient analytical capabilities, application depth, and data innovation arising from the large amount of business data accumulated in the organization of heavy-haul railway transportation, and promote the application of big data technology in the field of heavy haul railway transportation, this paper proposes a design solution for a big data analytics platform in the field of heavy-haul railway transportation. Based on an analysis of the characteristics of heavy-haul railways, a framework for the platform is presented, which utilizes a hybrid architecture combining Hadoop and MPP (Massively Parallel Processing). The study also designs the application and technical architecture of the big data platform, and discusses the key technologies and business applications of the platform. Currently, the construction and operation of the heavy-haul railway big data analytics platform based on this design solution have been implemented.

Key words: heavy-haul railway, big data, hybrid architecture, domain modeling

中图分类号:

U283

宋宗莹, 王文斌, 刘子扬, 周瑾, 刘永壮. 重载铁路运输大数据分析平台架构设计研究[J]. 铁路通信信号工程技术, 2023, 20(11): 44-49.

Song Zongying, Wang Wenbin, Liu Ziyang, Zhou Jin, Liu Yongzhuang. Design and Research on Architecture of Big Data Analytics Platform in Heavy-haul Railway Transportation[J]. Railway Signalling & Communication Engineering, 2023, 20(11): 44-49.

图/表 4

参考文献

[1]朱雨，石利刚，王健慧.面向智慧化的重载铁路发展研究[J].交通科技与经济，2021，23（4）：59-64.
Zhu Yu, Shi Ligang, Wang Jianhui. Research on the Development of Intelligent Heavy-Haul Railway[J]. Technology & Economy in Areas of Communications, 2021, 23(4): 59-64.
[2]宋大治，王健，徐钟全，等.城市轨道交通大数据技术应用研究[J].铁路通信信号工程技术，2022，19（2）：70-75.
Song Dazhi, Wang Jian, Xu Zhongquan, et al. Application of Big Data Technology in Urban Rail Transit[J]. Railway Signalling & Communication Engineering, 2022, 19(2): 1-6.
[3]邹丹，马小宁，王喆.铁路大数据平台架构研究
[J].铁路计算机应用，2019，28（8）：1-4.
Zou Dan, Ma Xiaoning, Wang Zhe. Research and Design of Railway Big Data Platform Architecture[J]. Railway Computer Application, 2019, 28(8): 1-4.
[4]王宏嘉，王晶，李瑞辰，等.重载铁路港口站大数据应用研究[J].能源科技，2023，21（1）：76-80.
Wang Hongjia, Wang Jing, Li Ruichen, et al. Research on Big Data Application in Heavy-Haul Railway Port Stations[J]. Energy Science and Technology, 2023, 21(1): 76-80.
[5]喻冰春.铁路货车大数据平台总体设计研究[J].铁路计算机应用，2019，28（9）：45-48.
Yu Bingchun. Overall Design of Big Data Platform for Railway Freight Cars[J]. Railway Computer Application, 2019, 28(9): 45-48.
[6]朱嘉斌.基于Hadoop+MPP架构的城市轨道交通大数据中心建设方案[J].城市轨道交通研究，2022，25（5）：54-57.
Zhu Jiabin. Construction Scheme of Urban Rail Transit Big Data Center Based on Hadoop+MPP Architecture[J]. Urban Mass Transit, 2022, 25(5): 54-57.
[7]巫东来，汤仕磊.大数据及海量数据处理架构:Hadoop vs MPP[J].软件导刊，2020，19（10）：218-222.
Wu Donglai, Tang Shilei. Big Data and Massive Data Processing Architecture:Hadoop Vs MPP[J]. Software Guide, 2020, 19(10): 218-222.
[8]吴丽杰，窦维江，李瑾，等.大数据平台安全组件构建研究[J].电脑知识与技术，2023，19（9）：72-75.
Wu Lijie, Dou Weijiang, Li Jin, et al. Research on Security Component Construction of Big Data Platform[J]. Computer Knowledge and Technology, 2023, 19(9): 72-75.

重载铁路运输大数据分析平台架构设计研究

Design and Research on Architecture of Big Data Analytics Platform in Heavy-haul Railway Transportation

PDF

可视化

摘要/Abstract

引用本文

使用本文

图/表 4

参考文献

相关文章 6

编辑推荐

Metrics

本文评价

[1]	王雨, 刘军, 周灿伟, 李慧. 英国轨道交通大数据规划与开放共享的启示[J]. 铁路通信信号工程技术, 2023, 20(10): 106-110.
[2]	黄天天, 马金鑫, 尹德胜, 赵小军. STP数据中心建设研究[J]. 铁路通信信号工程技术, 2022, 19(8): 51-56.
[3]	姚胜良, 杨硕, 李继, 马婧雯. 简谈重载铁路道岔转换系统工作状态智能诊断技术[J]. 铁路通信信号工程技术, 2022, 19(5): 17-20.
[4]	葛淑云, 周伟, 陈盼盼, 李慧娟. 城轨云工程质量验收标准的研究[J]. 铁路通信信号工程技术, 2022, 19(3): 65-69.
[5]	宋大治, 王健, 徐钟全, 刘光杰. 城市轨道交通大数据技术应用研究[J]. 铁路通信信号工程技术, 2022, 19(2): 70-75.
[6]	张利峰, 王春华. 重载铁路移动闭塞计算机联锁系统研究[J]. 铁路通信信号工程技术, 2021, 18(1): 12-18.