10.3969/j.issn.1000-386x.2018.12.025
轨道交通线网大数据的建模和存储方案
阐述一种面向轨道交通指挥中心,基于Hadoop架构的线网大数据的数据建模和数据存储方法.将线网大数据中的结构化数据,结合Hadoop平台以及组件特点和轨道交通行业的数据应用情况,选择合理的数据模型,进行数据建模和数据存储.针对逻辑建模作了详细阐述:临时数据文件和基础数据统一建模后存入HBase,中间数据层和数据集市层,以降范式的方法建表存入Hive中.对非结构化数据,采用Hadoop平台按应用和时间分类将小文件存入HBase,并可支持全文检索和分析.搭建的验证平台的实施结果证明,该方案对线网大数据实现了规范和高效的数据存储.
数据建模、数据仓库、城市轨道交通、线网指挥中心
35
TP274(自动化技术及设备)
2019-04-25(万方平台首次上网日期,不代表论文的发表时间)
共4页
131-134