Storm实时大数据计算框架

下载PDF

导出

摘要伴随着移动互联网,云计算以及物联网的迅猛发展,产生了海量的用户数据。传统的大数据处理框架Hadoop进行的是把数据先缓存起来,然后以批的方式进行处理,并且由于需要处理的输入数据存储在磁盘中,需要频繁读写,导致延迟高[1],不能满足实时处理数据流的要求。基于Storm的分布式系统在数据产生时便马上对其进行计算,而且吞吐率高,底层消息队列为ZeroMQ,保证信息被快速处理,可以实时处理新数据和写入数据库,有效地解决了基于Hadoop计算框架实时性计算能力的不足。

作者贺翔宇

机构地区中北大学计算机与控制工程学院

出处《中文科技期刊数据库(文摘版)自然科学》 2017年第1期00143-00143,共1页

关键词 STORM 大数据计算实时计算

分类号 TP311.52 [自动化与计算机技术—计算机软件与理论]

引文网络
相关文献

1单珂,孔祥龙,张一鸣,张宏宽.基于Hadoop的区域健康大数据平台研究与设计[J].计算机应用与软件,2025,42(4):8-12. 被引量：2
2丁度坤,张铁,谢存禧.机器人高速高精度智能运动控制策略研究[J].机器人技术与应用,2025(2):18-22.
3郑学东,谭诗霖.基于DNA变构的智能分子信息处理研究进展[J].沈阳航空航天大学学报,2025,42(1):1-13.
4王永红.基于大数据技术的计算机安全检测系统设计[J].电脑编程技巧与维护,2025(4):169-172. 被引量：1
5高双喜,曹淑服,孙永明.基于Spark的电影推荐系统设计与实现[J].河北省科学院学报,2025,42(2):1-5.
6陈莎,马玉蓉.大数据在电子商务个性化推荐系统中的应用[J].商场现代化,2025(9):60-62. 被引量：2
7王鑫帅,马苒,刘春晖,孙玉周.基于移动克里金插值的应变梯度板屈曲无网格法数值模拟[J].河南建材,2025(5):29-32.
8赵雨润,谢辉,谢光华,温初阳,刘沛鑫.基于物联网技术的石油勘探作业许可云平台系统设计[J].粘接,2025,52(5):123-126. 被引量：3

中文科技期刊数据库(文摘版)自然科学

2017年第1期

浏览历史

内容加载中请稍等...

Storm实时大数据计算框架

相关作者

相关机构

相关主题

浏览历史