期刊文献+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息

基于大数据的城市轨道交通数据处理流程研究 被引量：1

在线阅读 下载PDF
导出
摘要 该文对线网数据中心进行了简要介绍,从逻辑架构、处理机制和数据存储3个方面,对实时数据处理过程进行了分析。从逻辑架构、数据清洗、配置工作流、任务调度和数据存储5个方面,对离线数据处理过程进行了分析。青岛地铁利用大数据技术,结合地铁运营业务,对有关运营生产数据的实时及离线处理流程进行了研究,实现了线网实时生产数据及离线生产数据的数据处理服务,为运营决策提供数据支撑。
作者 兰慧峰 左旭涛 王美霞 岳阳 周凡
机构地区 青岛地铁集团有限公司 东软集团股份有限公司
出处 《中国新技术新产品》 2020年第10期1-4,共4页 New Technology & New Products of China
关键词 数据中心 实时数据处理 离线数据处理 工作流
分类号 TP311 [自动化与计算机技术—计算机软件与理论]
  • 相关文献

参考文献4

二级参考文献19

  • 1江小平,李成华,向文,张新访,颜海涛.k-means聚类算法的MapReduce并行化实现[J].华中科技大学学报（自然科学版）,2011,39(S1):120-124. 被引量：80
  • 2Hollingsworth D. The workflow reference model. Workflow Management Coalition. 1995.
  • 3Fan YS. Foundation of Workflow Management Technique. Beijing: Tsinghua University Press; Springer-Verlag, 2001 (in Chinese).
  • 4Rumbaugh J, Jacobson I, Booch G. The Unified Modeling Language Reference Manual. Addison Wesley Longman, Inc., 1999.
  • 5徐强,王振江.云计算应用开发实践.机械工业出版社.2011.12.
  • 6The ApacheTM Hadoop,m project, http://hadoop. apache, org/.
  • 7Chuck Lain, Hadoop in action, New York, US: Manning Publications Co., 2011.
  • 8Dean J, Ghemmawat S, MapR, educe: Simplied data processing on large clusters, Proceedings of the 6th Sympesium on Operating System Design and Implementation, New York: ACM Press, 2004: 137-150.
  • 9Apache.Hadoop distributed file system, 2010-09- 24, http://wiki.apa che.org/hadoop/HDFS.
  • 10都志辉.高性能计算之并行编程技术--MPI并行程序设计[M]北京:清华大学出版社,2006.

共引文献133

同被引文献6

引证文献1

二级引证文献2

中国新技术新产品
2020年 第10期

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部