期刊文献+
共找到8篇文章
< 1 >
每页显示 20 50 100
基于流式计算的地震大数据处理方法 被引量:1
1
作者 朱婧 田野 +1 位作者 贾丹丹 张訸 《地震研究》 北大核心 2026年第1期168-175,共8页
随着地震监测技术的不断进步和地震台网数量的增加,地震数据的采集量呈爆炸式增长。针对海量地震数据处理中存在的运算速率瓶颈、处理时间较长以及存储资源有限的问题,提出了1种高效的地震大数据处理方法,构建1个集成数据实时采集、传... 随着地震监测技术的不断进步和地震台网数量的增加,地震数据的采集量呈爆炸式增长。针对海量地震数据处理中存在的运算速率瓶颈、处理时间较长以及存储资源有限的问题,提出了1种高效的地震大数据处理方法,构建1个集成数据实时采集、传输、处理及存储的综合性计算平台。首先利用Flink框架从各个地震台站实时获取观测数据,通过filter、map、process等算子对数据进行解析处理,并序列化为JSON格式缓存至Kafka消息队列中。Flink作为消费者角色从Kafka中接收数据,进行进一步的计算、分析和建模,最终将处理后的数据存储到HBase分布式数据库中,实现了数据的即时访问和深度分析。此外,通过Flink的流处理能力和Kafka的高吞吐量消息传递机制,确保了数据处理的实时性和稳定性。实验结果表明,系统每秒能够读写约130万条数据,相当于每秒处理约700 MB的数据量。在数据检索方面,该方法检索速度相较于传统工具提高了60%以上。通过模拟实验和实际地震数据的测试,验证了该方法在处理大规模地震数据流时的稳定性和可靠性。 展开更多
关键词 地震大数据 流式计算 Apache Flink Apache Kafka Apache HBase
在线阅读 下载PDF
基于Druid的地震数据流检测方法 被引量:1
2
作者 李浩 高兵 《自动化应用》 2025年第2期93-95,共3页
随着地震观测台网的发展和海量地震观测数据的产生,出现了地震数据读写速度慢、地震检测效率低的问题,这对地震数据的存储与检测提出了新的挑战。为解决以上问题,设计了地震数据的流式存储格式,并提出了基于Druid的地震数据流检测方法... 随着地震观测台网的发展和海量地震观测数据的产生,出现了地震数据读写速度慢、地震检测效率低的问题,这对地震数据的存储与检测提出了新的挑战。为解决以上问题,设计了地震数据的流式存储格式,并提出了基于Druid的地震数据流检测方法。与现行方案相比,该方法具有更好的数据摄取和检测性能。 展开更多
关键词 Druid数据库 地震数据存储 地震数据流 地震数据检测
在线阅读 下载PDF
四川测震台网中心数据流现状及规划 被引量:1
3
作者 王宇航 吴朋 +3 位作者 蔡一川 马康熙 蒋波 管勇 《四川地震》 2020年第2期44-47,共4页
介绍了目前四川测震台网中心数据流规划搭建的发展历程、台网的服务能力及台网数据流服务架构等;总结了中心数据流规划及台站数据传输中存在的不足,并提出针对性建议。
关键词 四川测震台网 数据流 服务架构
在线阅读 下载PDF
测震台站数据传输模式改进
4
作者 李勇 潘志宏 蔡绍平 《地震地磁观测与研究》 2015年第6期109-113,共5页
为提高数字化地震监测台站的数据连续率及可用率,在综合考虑传输成本、建设难度、运维管理等因素基础上,提出测震台站双链路传输方案。经验证,该方案能有效提高测震台站数据传输连续率及可用率,为测震台站高效稳定的数据传输提供保障。
关键词 测震台站 串口服务器 DTU 链路冗余
在线阅读 下载PDF
大数据平台的测震数据流实时可视化系统设计与实现 被引量:4
5
作者 刘禹 李胜乐 李力 《测绘地理信息》 CSCD 2022年第4期77-81,共5页
为了探索大数据平台下的海量数据实时可视化技术,基于最新的HTML5(hyper text markup language 5)标准,以Kafka为数据接口,Websocket为通信协议,Echarts为前端渲染组件,设计和实现了一套B/S(browser/server)架构的测震数据流实时可视化... 为了探索大数据平台下的海量数据实时可视化技术,基于最新的HTML5(hyper text markup language 5)标准,以Kafka为数据接口,Websocket为通信协议,Echarts为前端渲染组件,设计和实现了一套B/S(browser/server)架构的测震数据流实时可视化系统。系统测试表明:本系统可实现数据流高效实时传输与可视化,相比较于传统可视化软件系统,具有前后端双工实时通信、大连接数、大吞吐量、服务器端负载低、美观简洁等诸多优点,能够满足未来大数据平台对海量数据的实时可视化要求。 展开更多
关键词 测震数据流 Kafka Websocket协议 ECharts 实时传输与可视化
原文传递
连续缺失地震数据的高阶流式预测滤波插值方法 被引量:5
6
作者 吴庚 刘财 +2 位作者 刘殿秘 刘洋 郑植升 《地球物理学报》 SCIE EI CAS CSCD 北大核心 2023年第3期1220-1231,共12页
由于观测系统实施以及经济因素的限制,采集到的勘探地震数据在空间方向上总是不规则分布的,并且往往会出现数据的大范围连续缺失情况.许多后续地震数据处理方法(例如:多次波压制和波动方程偏移等)都需要空间上规则分布的数据.插值技术... 由于观测系统实施以及经济因素的限制,采集到的勘探地震数据在空间方向上总是不规则分布的,并且往往会出现数据的大范围连续缺失情况.许多后续地震数据处理方法(例如:多次波压制和波动方程偏移等)都需要空间上规则分布的数据.插值技术是一种解决地震数据缺失问题的有效手段,但是传统的数据插值方法在进行连续缺失数据重建时往往会出现失效的情况,尤其在处理非平稳地震同相轴时精度不高,并且大多数的方法需要迭代计算,在处理高维大规模数据时效率较低.针对连续缺失地震数据的快速插值问题,本文提出了一种非迭代的时空域高阶流式预测滤波插值方法,通过使用高阶限制条件来提高连续缺失数据的滤波器估计精度,提高局部约束条件的稳定性,改善低阶流式计算由于滤波器系数无法连续更新所造成的插值失效情况.同时,空间非因果滤波器和蛇形插值路径的设计方案可以有效减小大范围连续缺失数据和数据边界对于预测滤波器的计算误差,本方法能够有效处理包括近炮检距缺失情况在内的连续缺失数据插值重建.通过与工业标准傅里叶凸集投影(POCS)方法进行比较,理论模型和实际数据处理结果表明,本文提出的高阶流式预测滤波插值方法对高维连续缺失地震数据有较好的重建效果,在插值精度和计算效率两个方面有更好的平衡性. 展开更多
关键词 地震数据插值 高阶流式预测滤波 连续缺失数据 空间非因果 蛇形插值路径
在线阅读 下载PDF
复杂地震波场的自适应流预测插值方法 被引量:2
7
作者 刘一 刘财 +2 位作者 刘洋 勾福岩 李炳秀 《吉林大学学报(地球科学版)》 EI CAS CSCD 北大核心 2018年第4期1260-1267,共8页
地震数据本质上是非平稳的,如何解决复杂非平稳地震波场的数据缺失问题是地震勘探数据处理的重要环节之一。预测滤波器在地震数据处理和分析中具有重要的作用,该技术可以有效地解决地震数据缺失问题,但传统的平稳预测滤波方法无法很好... 地震数据本质上是非平稳的,如何解决复杂非平稳地震波场的数据缺失问题是地震勘探数据处理的重要环节之一。预测滤波器在地震数据处理和分析中具有重要的作用,该技术可以有效地解决地震数据缺失问题,但传统的平稳预测滤波方法无法很好地适应地震数据的非平稳特征;因此,开发高效的复杂地震波场自适应预测插值方法具有重要的工业价值。本文将预测滤波器加入"流处理"的概念,滤波器系数随着地震数据的变化同时更新,此计算过程仅需矢量点积运算,能够提高计算效率并降低内存空间;并以此为基础开发基于流预测滤波的地震数据插值方法。利用多次波的动力学信息,通过互相关技术构建虚拟一次波,有效地解决了缺失数据位置滤波系数估计不准的问题,为插值过程提供了更为合理的滤波器估计,更好地解决了非平稳地震数据的重建问题。对Sigsbee 2B模型和实际数据的测试结果表明,该方法可以合理地针对复杂地震信息完成缺失数据的重建。 展开更多
关键词 数据重建 流预测滤波器 非平稳地震数据 虚拟一次波
在线阅读 下载PDF
地震数据采集系统中的数据压缩与FPGA实现 被引量:3
8
作者 李可寒 杨俊峰 宋克柱 《数据采集与处理》 CSCD 北大核心 2020年第4期753-761,共9页
实现了一种地震数据采集系统中的数据压缩算法,用于提升采集系统的数据传输效率,从而提高了海洋地震勘探的精度和深度。压缩针对地震数据流,比现有的地震数据压缩算法更容易在FPGA上实现。同时考虑到地震波的物理特征,借鉴语音压缩算法... 实现了一种地震数据采集系统中的数据压缩算法,用于提升采集系统的数据传输效率,从而提高了海洋地震勘探的精度和深度。压缩针对地震数据流,比现有的地震数据压缩算法更容易在FPGA上实现。同时考虑到地震波的物理特征,借鉴语音压缩算法,实现了一种易于用FPGA实现的24位地震数据流无损压缩算法,平均能将采集的地震数据压缩至原始数据大小的54%。 展开更多
关键词 数据压缩 无损压缩 数据流压缩 24位地震数据 现场可编程门阵列
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部