多通道数据并行实时预处理与高速落盘的系统与方法研究

1

作者 刘秋飞 李忠玉 卜伟雄 《雷达与对抗》 2025年第1期59-63,共5页

针对目前雷达系统多通道数据并行传输时所存在的传输误码、通道间时序不同步、同类型数据通道间组合异常以及同类型数据内部逻辑顺序无法调整等问题,提出一种多通道数据并行实时预处理与高速落盘系统解决方案。系统包括片上并行实时预... 针对目前雷达系统多通道数据并行传输时所存在的传输误码、通道间时序不同步、同类型数据通道间组合异常以及同类型数据内部逻辑顺序无法调整等问题,提出一种多通道数据并行实时预处理与高速落盘系统解决方案。系统包括片上并行实时预处理平台与高速落盘平台,能够克服传统数据传输技术中无实时数据预处理功能、不支持多类型数据并行高速传输的难点,实现多通道数据并行实时预处理与传输,可有效提升雷达系统的数据处理效率,具有较高的实际应用价值。 展开更多

关键词 多通道 并行实时 预处理 高速落盘

在线阅读 下载PDF 职称材料

一种流数据实时写入保障下的数据查询方法 被引量：7

2

作者 侯荣军 房俊 张建静 《计算机应用研究》 CSCD 北大核心 2014年第9期2736-2740,共5页

各类流式传感数据的实时接收与处理是物联网智能应用的基本要求。针对某城市车辆实时监管系统暴露出的数据实时接收与高效数据查询互相制约的问题,提出一种适用于物联网数据管理的结构化数据查询优化方法,在保障流数据实时写入的同时提... 各类流式传感数据的实时接收与处理是物联网智能应用的基本要求。针对某城市车辆实时监管系统暴露出的数据实时接收与高效数据查询互相制约的问题,提出一种适用于物联网数据管理的结构化数据查询优化方法,在保障流数据实时写入的同时提供高效的数据查询能力。该方法采用数据库集群应对数据并发访问时的性能需求;通过主从延迟复制技术减少数据查询对数据写入性能的影响;采用数据分区和数据缓存技术提升单数据节点的查询性能。实验结果表明,该方法能在一定程度上减少查询对数据写入的影响,提高数据的查询效率。 展开更多

关键词 流数据 实时写入 数据查询 数据库集群 主从延迟复制 数据分区 数据缓存

在线阅读 下载PDF 职称材料

基于本地化数据空间集中调度的海量数据平台优化策略 被引量：1

3

作者 温立辉 《深圳职业技术学院学报》 CAS 2019年第5期23-28,67,共7页

针对海量数据在传统数据集成方式中性能不佳、效率低下问题,提出了一种集中式基于数据空间的优化方案.首先,把平台数据归类为静态数据与动态数据,以解决传统集成方式中数据量过大、数据种类混乱,不利平台的实时响应;其次,通过主/从分离... 针对海量数据在传统数据集成方式中性能不佳、效率低下问题,提出了一种集中式基于数据空间的优化方案.首先,把平台数据归类为静态数据与动态数据,以解决传统集成方式中数据量过大、数据种类混乱,不利平台的实时响应;其次,通过主/从分离的读写方式有效降低静态数据机器上的节点负载,有效提升读写能力;再次,集群分片存储方式极大改善了平台对动态数据处理能力.与联机事务分析(OLAP)集成方式相比,本方案依托数据切片、配置式数据源管理,更加灵活、轻巧,能更好地适应复杂的数据环境,适合中小企业对海量数据运维的需求. 展开更多

关键词 大数据 水平切片 时间维度 主/从 读写分离 连接工厂

在线阅读 下载PDF 职称材料

双端口SRAM抗写干扰结构的优化设计 被引量：2

4

作者 李学瑞 秋小强 刘兴辉 《半导体技术》 CAS 北大核心 2023年第7期617-623,共7页

针对双端口静态随机存储器(SRAM)通常存在写干扰而导致数据写入困难的问题,基于经典位线电平复制技术提出了一种新型的位线电平复制结构。基于SMIC 28 nm CMOS工艺对位线电平复制结构进行设计,通过优化控制逻辑的组合电路,缩短位线电平... 针对双端口静态随机存储器(SRAM)通常存在写干扰而导致数据写入困难的问题,基于经典位线电平复制技术提出了一种新型的位线电平复制结构。基于SMIC 28 nm CMOS工艺对位线电平复制结构进行设计,通过优化控制逻辑的组合电路,缩短位线电平复制操作的开启时间,提高了数据写入SRAM的速度,使设计的SRAM可在更高频率下正常工作,同时降低了动态功耗。仿真结果显示,在0.9 V工作电压下,相对于经典位线电平复制结构,采用新结构设计的SRAM的写入时间缩短了约27.4%,动态功耗降低了约48.1%,抗干扰能力得到显著提升。 展开更多

关键词 双端口静态随机存储器(SRAM) 位线电平复制 写干扰 控制逻辑 数据写入时间

原文传递

一种支持持续数据保护的虚拟存储设备的设计与实现 被引量：3

5

作者 李亮 罗宇 文莎 《计算机研究与发展》 EI CSCD 北大核心 2011年第S1期278-282,共5页

数据对于企业至关重要,当系统失效时,快速准确地进行恢复是十分必要的.传统的数据保护技术,如镜像、快照和备份都有各自的缺点,它们不能提供对数据的持续保护.设计实现了一种块设备级的持续数据保护系统YH-CDPS.当系统失效时,通过该系... 数据对于企业至关重要,当系统失效时,快速准确地进行恢复是十分必要的.传统的数据保护技术,如镜像、快照和备份都有各自的缺点,它们不能提供对数据的持续保护.设计实现了一种块设备级的持续数据保护系统YH-CDPS.当系统失效时,通过该系统可迅速恢复到之前任何时间点的状态,且对用户透明. 展开更多

关键词 持续数据保护(CDP) redirect-on-write 虚拟设备 恢复时间

在线阅读 下载PDF 职称材料

足球赛事战报的自动写作研究 被引量：3

6

作者 王文超 吕学强 +1 位作者 张凯 周建设 《北京大学学报（自然科学版）》 EI CAS CSCD 北大核心 2018年第2期271-278,共8页

在分析不同类型体育赛事报道特点的基础上,首次提出一种以实时数据作为数据源的足球赛事战报自动写作方法。该方法利用历史战报,对实时数据进行自动标注,得到训练集,使用卷积神经网络(CNN)对标注后的实时数据进行建模,自动识别实时数据... 在分析不同类型体育赛事报道特点的基础上,首次提出一种以实时数据作为数据源的足球赛事战报自动写作方法。该方法利用历史战报,对实时数据进行自动标注,得到训练集,使用卷积神经网络(CNN)对标注后的实时数据进行建模,自动识别实时数据中的关键事件,将关键事件中结构化的信息生成战报风格的自然语言。实验表明,与其他方法相比,该方法写作效果更好,内容更加详实,可以很方便地扩展到其他赛事的自动写作。 展开更多

关键词 自动写作 足球 战报 实时数据

在线阅读 下载PDF 职称材料

基于一款EEPROM IP核的读写控制设计 被引量：1

7

作者 张剑 徐东明 王鹏 《中国集成电路》 2014年第10期41-44,51,共5页

对于芯片处理的数据可以在其内部存储,同时又为了简化芯片的设计,可在芯片内部嵌入存储器IP核。本文设计了华虹一款EEPROM IP核的读写时序,采用Verilog语言描述,并在Model Sim SE的环境下进行仿真,实现了数据的读写。

关键词 EEPROM IP核 读写数据 时序要求

在线阅读 下载PDF 职称材料

基于融合数据库的海量传感器信息存储架构 被引量：9

8

作者 类兴邦 房俊 《计算机科学》 CSCD 北大核心 2016年第6期68-71,111,共5页

在物联网、工业监控等系统中,庞大规模的传感器每时每刻都在产生大量的数据。实时数据库在处理高时效性数据方面具有较强的优势,但是在处理大规模传感器数据方面存在着存储量低、不便于扩展的弊端。而HBase在处理海量数据方面具有高读... 在物联网、工业监控等系统中,庞大规模的传感器每时每刻都在产生大量的数据。实时数据库在处理高时效性数据方面具有较强的优势,但是在处理大规模传感器数据方面存在着存储量低、不便于扩展的弊端。而HBase在处理海量数据方面具有高读写性能、高扩展性、高可靠性和高存储量的优势。通过将实时数据库与HBase相结合,设计并实现了基于融合数据库的传感器信息存储架构。该架构采用多租户机制,对HBase写入进行了优化,将原来分散的传感器数据集中式存储,并把传感器元数据与历史数据分离存储,同时维持了实时数据库原有的查询、数据组织结构的特点。经过实验验证,该架构具有较高的读写性能以及良好的可扩展性,有效避免了Region写入热点,实现了集群负载均衡。 展开更多

关键词 实时数据库 HBASE 传感器数据 集中式存储 写入优化

在线阅读 下载PDF 职称材料

DDR3上的双读写通道设计与实现 被引量：2

9

作者 唐瑞 叶李萍 +1 位作者 王经坤 姚远程 《自动化仪表》 CAS 2018年第4期14-17,共4页

针对DDR3的灵活性与使用效率问题,提出了一种DDR3上的双读写通道设计与实现策略。在DDR3上切割出两套独立读写通道,基于时分复用(TDM)原则,使每套读写状态互不影响,能按要求完成用户任意读写指令。设计了一种时分复用桥接电路,通过数据... 针对DDR3的灵活性与使用效率问题,提出了一种DDR3上的双读写通道设计与实现策略。在DDR3上切割出两套独立读写通道,基于时分复用(TDM)原则,使每套读写状态互不影响,能按要求完成用户任意读写指令。设计了一种时分复用桥接电路,通过数据切换器,使两套用户读写接口分时的与DDR3控制器接口相连接。将DDR3 IP核MIG提供的一套控制接口搭建为两套独立的用户读写接口,分时间片轮循执行用户读写命令,能总体实现对DDR3的同时读写操作。板级测试表明,DDR3内部读写时钟达800 MHz,外部用户接口操作时钟达200 MHz,用户数据位宽达256 bit,能满足用户同时读写的要求。该策略有助于解决各种高速实时数据缓存问题,具有广泛的应用价值。 展开更多

关键词 DDR3控制器 单片机 双读写通道 时分复用 桥接电路 数据切换

在线阅读 下载PDF 职称材料

一种基于DSO的DDR2深存储设计 被引量：1

10

作者 叶兵 王厚军 曾浩 《电子质量》 2010年第8期35-36,40,共3页

深存储是数字示波器三大性能指标之一,应用DDR2能够提高数字示波器的存储深度。基于DSO的DDR2深存储技术,本文设计了由1GbitDDR2实现最大128MB存储深度的深存储系统,重点介绍了设计的整体思想,时钟控制设计以及DDR2数据读写控制等关键技... 深存储是数字示波器三大性能指标之一,应用DDR2能够提高数字示波器的存储深度。基于DSO的DDR2深存储技术,本文设计了由1GbitDDR2实现最大128MB存储深度的深存储系统,重点介绍了设计的整体思想,时钟控制设计以及DDR2数据读写控制等关键技术;同时,给出了DDR2深存储后的信号实时采集数据的实验结果并作了详细的分析。 展开更多

关键词 深存储 DDR2 时钟控制 DDR2数据读写控制 信号实时采集

在线阅读 下载PDF 职称材料

一种基于两级缓存的高效时序数据库系统 被引量：5

11

作者 郭亮亮 靳燕 +1 位作者 杨博 彭甫镕 《测试技术学报》 2022年第2期147-152,共6页

随着大数据时代的到来和工业物联网技术的发展,大量的时序数据被采集、分析和应用.时序数据具有来源广泛、持续递增、变化单一等特点,要求数据库能高速写入、能对数据高效压缩.本文针对现有时序数据存储技术吞吐量小、空间利用率低等问... 随着大数据时代的到来和工业物联网技术的发展,大量的时序数据被采集、分析和应用.时序数据具有来源广泛、持续递增、变化单一等特点,要求数据库能高速写入、能对数据高效压缩.本文针对现有时序数据存储技术吞吐量小、空间利用率低等问题,在开源时序数据库OpenTSDB的基础上,提出一种融合两级高速缓存与扇区压缩的高效时序数据库系统,实现数据的高并发写入与高效率存储.通过实验验证了系统的有效性. 展开更多

关键词 时序数据 数据库 压缩算法 数据存储 并发写入

在线阅读 下载PDF 职称材料

地震资料在FoCUS系统中任意时间段输入/输出的实现

12

作者 钟政华 陈宏文 《南海地质研究》 2003年第1期88-93,共6页

应用在油气探测和天然气水合物研究中的高分辨率采集地震资料,其海量的数据对室内的处理提出了新的难题,不仅降低了对有效数据在磁盘中的使用率,也降低了处理效率。虽然可以通过计算机硬件的升级来提高处理效率,但是我们也应在处理软件... 应用在油气探测和天然气水合物研究中的高分辨率采集地震资料,其海量的数据对室内的处理提出了新的难题,不仅降低了对有效数据在磁盘中的使用率,也降低了处理效率。虽然可以通过计算机硬件的升级来提高处理效率,但是我们也应在处理软件方面寻求提高磁盘使用率和处理效率的办法。本文正是根据这个思路,分析了FOCUS地震资料处理系统中最常用的磁盘读写模块DSKRD和DSKWRT,最终修改形成了一对可以读写任意时间段地震道数据的新模块WINDWR和WINRD,在实际资料处理中取得令人满意的效果。 展开更多

关键词 FOCUS地震资料处理系统 地震道数据 时间段 读写磁盘

原文传递