铁路数据分布式湖仓一体架构分析与设计

摘要：

科学合理的数据资源分类方法和行之有效的数据湖架构体系,可以支撑起铁路全业务数据的高效存储、组织和利用,并进一步支持并优化各项运营业务.文章首先对现有数据湖架构进行简要分析,确定选用湖仓一体的概念,将铁路数据以主题进行分类以适应业务处理需求;其次设计了铁路数据分布式湖仓一体架构,阐述了路局级子湖仓一体与国铁集团总湖仓一体的架构与功能,以及两者之间的数据流转过程;最后分析了所设计架构的特性与存在的问题,为进一步构建有效的铁路运营数据湖提供了参考.

关键词：铁路大数据、数据治理、数据湖、湖仓一体、分布式架构

所属期刊栏目：8

分类号：TP302.1(计算技术、计算机技术)

资助基金：中国国家铁路集团有限公司科技研究开发计划P2021S012

在线出版日期：2024-01-30（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：54-58