期刊文献+
共找到833篇文章
< 1 2 42 >
每页显示 20 50 100
XHDF5:面向HEPS的高性能HDF5数据远程访问系统
1
作者 冯时超 程耀东 程垚松 《数据与计算发展前沿(中英文)》 2025年第3期136-148,共13页
【目的】为满足异地用户对高能同步辐射光源(HEPS)海量数据的访问需求,提出了一种高效且具备良好适应性的基于HDF5数据格式的远程访问解决方案。【应用背景】HEPS每年将产生海量科学数据,以HDF5作为统一的数据格式,采用“数据集中存储,... 【目的】为满足异地用户对高能同步辐射光源(HEPS)海量数据的访问需求,提出了一种高效且具备良好适应性的基于HDF5数据格式的远程访问解决方案。【应用背景】HEPS每年将产生海量科学数据,以HDF5作为统一的数据格式,采用“数据集中存储,异地分布处理”的计算模式,用户的计算任务无需提前下载数据即可无缝地运行在异地的算力中心上。【方法】通过对HEPS数据中心的存储现状和目前数据访问手段的分析,采用HDF5 VOL与XRootD实现对HDF5数据的透明访问,设计并实现了XHDF5系统。该系统采用了并发访问、数据压缩等方式提高访问性能。【结果】通过多项技术测试、性能对比实验以及大规模数据处理测试,XHDF5系统在远程访问HDF5文件时展现出卓越的性能和高度的稳定性。与传统的基于文件系统挂载的访问方法和H5serv技术相比,XHDF5系统在高网络延迟的环境下表现尤为突出。【结论】XHDF5系统能够高效地支持跨区域的数据共享与协同处理,为科研人员提供一个稳定可靠的高性能数据访问环境,助力科学研究的顺利开展。 展开更多
关键词 XRootD hdf5 HEPS NFS 远程数据访问
在线阅读 下载PDF
基于HDF5文件格式的KYLIN-2软件组件库 被引量:3
2
作者 冯晋涛 芦韡 +4 位作者 柴晓明 涂晓兰 尹强 陈定勇 刘远 《计算机应用》 CSCD 北大核心 2018年第4期1012-1016,共5页
KYLIN-2是中国核动力研究设计院自主研发的先进中子学栅格(组件)计算软件,针对KYLIN-2软件中海量数据存储和处理的问题,提出一种基于对分层数据存储格式v5(HDF5)的计算数据存储方案。首先,对HDF5文件格式进行了研究;其次,根据KYLIN-2软... KYLIN-2是中国核动力研究设计院自主研发的先进中子学栅格(组件)计算软件,针对KYLIN-2软件中海量数据存储和处理的问题,提出一种基于对分层数据存储格式v5(HDF5)的计算数据存储方案。首先,对HDF5文件格式进行了研究;其次,根据KYLIN-2软件需求,设计了基于HDF5文件格式的组件库KYMRES;最后,通过自开发的HDF5文件读写工具完成了KYMRES库的实现过程。通过性能测试表明,基于HDF5文件格式的组件库KYMRES较常规存储方案具有更高的I/O效率,其读、写效率平均提升到旧算法的2.3倍和4.5倍。KYMRES库在海量数据存储和处理方面具有显著优越性,为KYLIN-2软件提供了一种新型的数据存储和管理方案。 展开更多
关键词 数据存储和处理 hdf5 KYMRES组件库 hdf5文件读写工具 高效I/O
在线阅读 下载PDF
HDFS并行备份与恢复技术研究与实现
3
作者 俞训峰 《电脑与信息技术》 2025年第5期86-89,共4页
Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)能提供高吞吐量的数据访问,适合大规模数据集方面的应用,在备份与恢复方面有更高的性能和可靠性要求。为应对此类问题,提出了一种基于多代理的并行备份方案。通过读取待备份... Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)能提供高吞吐量的数据访问,适合大规模数据集方面的应用,在备份与恢复方面有更高的性能和可靠性要求。为应对此类问题,提出了一种基于多代理的并行备份方案。通过读取待备份的文件列表,将文件备份任务分配给多个备份代理,使其并行处理不同文件,从而加速备份过程,获得更高的性能和可靠性。在恢复方面,设计了高效的并行恢复机制,确保数据快速恢复。实验结果表明,所提出的方法在处理大规模数据集时,在3个代理并行备份或恢复时,相较单代理的性能可提高约200%,为HDFS的备份与恢复提供了一种有效的解决方案。 展开更多
关键词 hdfS 大数据 并行备份 并行恢复 并行协调
在线阅读 下载PDF
基于HDFS与Elastic Search的网络信息安全检测技术研究
4
作者 马力 李丽 《自动化与仪器仪表》 2025年第4期16-19,24,共5页
对网络信息安全检测问题进行研究,提出一种基于改进VGG19的异常检测模型,构建基于HDFS与Elastic Search网络信息安全检测系统对Web日志进行异常检测,并将检测结果进行可视化展示。首先,针对传统VGG19卷积神经网络的不足进行改进,并采用... 对网络信息安全检测问题进行研究,提出一种基于改进VGG19的异常检测模型,构建基于HDFS与Elastic Search网络信息安全检测系统对Web日志进行异常检测,并将检测结果进行可视化展示。首先,针对传统VGG19卷积神经网络的不足进行改进,并采用改进后的VGG19网络构建异常检测模型;然后将构建的异常检测模型部署到基于HDFS与Elastic Search网络信息安全检测系统中;最后采用Filebeat日志数据收集工具对互联网用户的访问日志进行采集并构建数据集,对构建的异常检测模型进行测试。测试结果表明:基于改进VGG19的异常检测模型在训练过程中,F1值为0.91、精确率为92.55%,在测试集上的平均检测准确率为94%、检测时间平均为0.25 s,检测精度高、检测速度快,适用于构建的网络信息安全检测系统。 展开更多
关键词 网络信息安全检测 VGG19网络 hdfS Elastic Search
原文传递
分布式文件系统HDFS处理小文件的优化方案 被引量:8
5
作者 杨彬 《软件》 2014年第6期65-69,共5页
Hadoop分布式文件系统(HDFS)是为可靠地存储和管理海量文件而设计。在HDFS中,所有的文件由单一的服务器NameNode来管理。因此,随着小文件数量的增加,会使HDFS系统性能下降。为了提高存储和访问HDFS上小文件的效率,本文提出了一个解决方... Hadoop分布式文件系统(HDFS)是为可靠地存储和管理海量文件而设计。在HDFS中,所有的文件由单一的服务器NameNode来管理。因此,随着小文件数量的增加,会使HDFS系统性能下降。为了提高存储和访问HDFS上小文件的效率,本文提出了一个解决方案,即:扩展的Hadoop分布式文件系统(EHDFS)。这种方法把一组相关文件组合成一个大文件来减少文件的数量,然后建立一种索引机制,从这个组合文件中识别并访问客户所要的单个文件。实验结果表明EHDFS提高了存储和访问大量小文件的效率。 展开更多
关键词 Hadoop分布式文件系统(hdfS) 小文件 扩展的hdfS(EhdfS)
在线阅读 下载PDF
HDFS下载效率的优化 被引量:23
6
作者 曹宁 吴中海 +1 位作者 刘宏志 张齐勋 《计算机应用》 CSCD 北大核心 2010年第8期2060-2065,2240,共7页
针对HDFS的内部数据下载效率较低和可能出现的负载不均衡的问题进行了研究,从分布式文件整体下载效率和数据块的下载效率两方面提出了优化方法。实验结果表明:两个方法都能提高效率,但在集群有大量DataNode的前提下,两者结合起来的方法... 针对HDFS的内部数据下载效率较低和可能出现的负载不均衡的问题进行了研究,从分布式文件整体下载效率和数据块的下载效率两方面提出了优化方法。实验结果表明:两个方法都能提高效率,但在集群有大量DataNode的前提下,两者结合起来的方法能更好地提高下载效率和均衡DataNode的负载。 展开更多
关键词 云计算 Hadoop档案系统(hdfS) 多线程 并行下载
在线阅读 下载PDF
基于范德蒙码的HDFS优化存储策略研究 被引量:18
7
作者 宋宝燕 王俊陆 王妍 《计算机学报》 EI CSCD 北大核心 2015年第9期1825-1837,共13页
随着大数据时代的到来,新型文件系统HDFS(Hadoop分布式文件系统)的应用越来越广泛.但其本身也存在着整体存储成本过高、可扩展性低、节点负载均衡能力不足等问题.因此,该文提出了一种基于范德蒙码的HDFS分散式动态副本存储优化策略,针对... 随着大数据时代的到来,新型文件系统HDFS(Hadoop分布式文件系统)的应用越来越广泛.但其本身也存在着整体存储成本过高、可扩展性低、节点负载均衡能力不足等问题.因此,该文提出了一种基于范德蒙码的HDFS分散式动态副本存储优化策略,针对HDFS大多部署在大量的廉价硬件集群上的实际情况,在范德蒙码优化策略的基础上,采用分散式动态副本控制的思想对HDFS文件操作的计算过程、计算模式以及译码触发策略进行系统的改进,并通过校验码动态设置的方式将容错度控制在一个理想的范围之内,此外,结合伽罗华有限域理论对范德蒙码的编译码操作及计算方法进行全面优化,在不影响HDFS存储结构的前提下,降低了范德蒙码编译码的时间代价和计算的内存压力,节约了HDFS约30%的存储开销,数据可靠性提高了约200%,均衡HDFS系统节点负载能力,译码恢复效率平均提升约40%,形成了一套完整的、系统的优化方案,为未来HDFS的发展提供了一条有效途径. 展开更多
关键词 大数据 hdfS 范德蒙码 分散式动态副本 优化存储
在线阅读 下载PDF
一种面向HDFS的多层索引技术 被引量:8
8
作者 何龙 陈晋川 杜小勇 《软件学报》 EI CSCD 北大核心 2017年第3期502-513,共12页
SOH(SQL over HDFS)系统通常将数据存储于分布式文件系统HDFS(Hadoop distributed file system)中,采用Map/Reduce或分布式查询引擎来处理查询任务.得益于HDFS以及Map/Reduce的容错能力和可扩展性,SOH系统可以很好地应对数据规模的飞速... SOH(SQL over HDFS)系统通常将数据存储于分布式文件系统HDFS(Hadoop distributed file system)中,采用Map/Reduce或分布式查询引擎来处理查询任务.得益于HDFS以及Map/Reduce的容错能力和可扩展性,SOH系统可以很好地应对数据规模的飞速增长,完成分析型查询处理.然而,在处理选择型查询或交互式查询时,这类系统暴露出了性能上的缺陷.提出一种通用的索引技术,可以应用于SOH系统中,以提高其查询处理的效率.分析了SOH系统访问HDFS文件的过程,指出了其中影响数据加载时间的关键因素.提出了split层和split内部双层索引机制;设计并实现了聚集索引和非聚集索引;最后,在标准数据集上进行了大量实验,并与现有基于HDFS的索引技术进行了比较.实验结果表明,所提出的索引技术可以有效地提高查询处理的效率. 展开更多
关键词 查询 索引 hdfS SOH 大数据
在线阅读 下载PDF
HDFS下海量小文件高效存储与索引方法 被引量:5
9
作者 肖玉泽 张利军 +2 位作者 潘巍 张小芳 李战怀 《小型微型计算机系统》 CSCD 北大核心 2015年第10期2218-2223,共6页
分布式文件系统HDFS被用来存储大文件,若在其中存储海量小文件将会严重消耗Name Node内存,影响系统性能,同时小文件也不利于使用MapReduce框架进行并行处理和分析.另外,小文件附带的多维元信息也需要以一种合理的方式进行存储和索引以... 分布式文件系统HDFS被用来存储大文件,若在其中存储海量小文件将会严重消耗Name Node内存,影响系统性能,同时小文件也不利于使用MapReduce框架进行并行处理和分析.另外,小文件附带的多维元信息也需要以一种合理的方式进行存储和索引以便于查询.本文针对以上问题,提出一种基于多维列索引的小文件管理方案,支持文件的并发上传、下载及删除操作,并在多个查询维度上提供文件的自由检索.本文提出的小文件合并方案能够明显减少HDFS上的文件数量,经过实验对比,在小文件元信息的查询效率方面,本文提出的多维索引方案优于HBase,同时保证了文件传输的吞吐量. 展开更多
关键词 hdfS 海量小文件 多维列索引 文件信息查询
在线阅读 下载PDF
Matlab对基于HDF格式的MODIS1B数据的提取方法与实现 被引量:12
10
作者 陈林 牛生杰 仲凌志 《气象科学》 CSCD 北大核心 2006年第6期676-681,共6页
基于HDF文件格式的MODIS数据的应用越来越广泛,MODIS数据开发应用的前提是对MODIS 1B数据的提取。本文详细介绍了利用Matlab对HDF文件进行读写操作的过程,在此基础上给出了提取MODIS 1B数据的流程图,实现了对MODIS 1B数据的提取,为MODI... 基于HDF文件格式的MODIS数据的应用越来越广泛,MODIS数据开发应用的前提是对MODIS 1B数据的提取。本文详细介绍了利用Matlab对HDF文件进行读写操作的过程,在此基础上给出了提取MODIS 1B数据的流程图,实现了对MODIS 1B数据的提取,为MODIS二级产品的开发打下了基础。 展开更多
关键词 MATLAB hdf文件 MODIS 数据提取
在线阅读 下载PDF
SQL-DFS:一种基于HDFS的海量小文件存储系统 被引量:7
11
作者 马志强 杨双涛 +1 位作者 闫瑞 张泽广 《北京工业大学学报》 CAS CSCD 北大核心 2016年第1期134-141,共8页
针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件... 针对Hadoop分布式文件系统(Hadoop distributed file system,HDFS)进行小文件存储时Name Node内存占用率高的问题,通过分析HDFS基础架构,提出了基于元数据存储集群的SQL-DFS文件系统.通过在Name Node中加入小文件处理模块实现了小文件元数据由Name Node内存到元数据存储集群的迁移,借助关系数据库集群实现了小文件元数据的快速读写,并对小文件读取过程进行优化,减少了文件客户端对Name Node的请求次数;通过将部分Data Node文件块的校验工作交由元数据存储集群完成,进一步降低了Name Node节点的负载压力.最终通过搭建HDFS和SQL-DFS实验平台,对HDFS和SQL-DFS 2种架构进行了小文件读写的对比测试,实验结果表明:SQLDFS在文件平均耗时(file average cost,FAC)和内存占用率方面均明显优于原HDFS架构,具有更好的小文件存储能力,可用于海量小文件的存储. 展开更多
关键词 Hadoop分布式文件系统(hdfS) 元数据存储集群 小文件 元数据 内存占用率
在线阅读 下载PDF
异补骨脂素对光老化HDF细胞ER/TGF-β_1/Smads信号通路的调控效应研究 被引量:6
12
作者 顾婷 徐占玲 +4 位作者 朴成玉 刘爽 高海娜 吴修红 张宁 《中药材》 CAS 北大核心 2017年第7期1683-1686,共4页
目的:研究异补骨脂素对光老化人真皮成纤维(HDF)细胞ER/TGF-β_1/Smads信号通路的调控效应。方法:建立长波紫外线(UVA)损伤HDF模型,给予不同浓度异补骨脂素和通路阻断剂进行干预,MTT法检测细胞增殖率,Western blotting和Real Time-PCR... 目的:研究异补骨脂素对光老化人真皮成纤维(HDF)细胞ER/TGF-β_1/Smads信号通路的调控效应。方法:建立长波紫外线(UVA)损伤HDF模型,给予不同浓度异补骨脂素和通路阻断剂进行干预,MTT法检测细胞增殖率,Western blotting和Real Time-PCR法检测各组细胞内信号转导分子(Smad3)、转化生长因子(TGF-β_1)、Ⅰ型胶原(COL1A1)蛋白和对应mRNA的表达。结果:与正常对照组比较,模型组增殖率及Smad3、TGF-β_1、COL1A1蛋白和mRNA表达均显著降低(P<0.01);与模型组比较,各给药组增殖率和Smad3、TGF-β_1、COL1A1蛋白及mRNA表达均显著升高(P<0.01);与异补骨脂素高浓度组比较,TGF-β_1、Smad3、ER三个阻断剂组相对应的TGF-β_1、Smad3和COL1A1蛋白及相应mRNA表达均显著降低(P<0.01)。结论:异补骨脂素能增加HDF细胞TGF-β_1、Smad3、COL1A1蛋白及mRNA表达,对光老化HDF细胞胶原合成有促进作用;但这种作用能被TGF-β_1、Smad3和ER阻断剂所抑制,推测异补骨脂素促进胶原合成的作用机制与ER/TGF-β_1/Smads信号通路有关。 展开更多
关键词 异补骨脂素 光老化hdf细胞 ER/TGF-β1/Smads信号通路
原文传递
基于HDFS管理MapGIS K9瓦片地图集的研究与实现 被引量:8
13
作者 万波 党琦 杨林 《计算机应用与软件》 CSCD 北大核心 2013年第12期232-235,共4页
关系型数据库在管理海量空间数据时遇到诸多瓶颈,HDFS(Hadoop Distributed Filesystem)通过将大数据分割为多个小数据块,并将其分别存储在多个数据节点组成的分布式集群中,成为一种新的存储海量空间数据的方法。使用HDFS作为平台,利用... 关系型数据库在管理海量空间数据时遇到诸多瓶颈,HDFS(Hadoop Distributed Filesystem)通过将大数据分割为多个小数据块,并将其分别存储在多个数据节点组成的分布式集群中,成为一种新的存储海量空间数据的方法。使用HDFS作为平台,利用数据结构类型MapFile设计一种管理MapGIS K9瓦片地图集的方式,并进行实验。实验表明用HDFS管理海量瓦片地图比传统方式管理更易扩展,更加安全,效率更加高。 展开更多
关键词 海量空间数据 管理 hdfS 瓦片地图集
在线阅读 下载PDF
面向数值模拟数据的HDF5性能优化 被引量:10
14
作者 沈卫超 曹立强 +1 位作者 夏芳 宋磊 《计算机研究与发展》 EI CSCD 北大核心 2012年第S1期314-318,共5页
大规模数值模拟数据对可视化分析提出了挑战,I/O是影响可视化交互性能的重要因素.HDF5是科学计算领域广泛采用的存储格式,介绍了HDF5的抽象数据模型、数据读写流程,并使用典型数值模拟数据测试了HDF5的读性能.测试发现HDF5的数据集定位... 大规模数值模拟数据对可视化分析提出了挑战,I/O是影响可视化交互性能的重要因素.HDF5是科学计算领域广泛采用的存储格式,介绍了HDF5的抽象数据模型、数据读写流程,并使用典型数值模拟数据测试了HDF5的读性能.测试发现HDF5的数据集定位开销较大.根据数值模拟数据的数据块以整数有规律编号的特点,通过在HDF5中增加数据块视图对象来提高读性能.测试表明,该方法可显著加速数据的读取性能. 展开更多
关键词 数值模拟 大规模数据场 hdf5 科学数据管理
在线阅读 下载PDF
黄芪血清药理对人胚肺二倍体成纤维细胞(HDF)抗衰老作用机制的研究 被引量:5
15
作者 李鸿梅 赵丹威 +5 位作者 张鹏霞 李晶 王昭 马庆华 欧芹 魏晓东 《中国老年学杂志》 CAS CSCD 北大核心 2005年第12期1530-1532,共3页
目的观察黄芪血清对人二倍体成纤维细胞(HDF)的抗衰老作用。方法以黄芪水煎剂灌胃家兔获得含药血清,以含黄芪血清的DMEM培养基培养HDF细胞,同时以不含黄芪的家兔血清作空白对照,测试HDF的部分衰老指标。结果含黄芪的培养基培养的HDF细... 目的观察黄芪血清对人二倍体成纤维细胞(HDF)的抗衰老作用。方法以黄芪水煎剂灌胃家兔获得含药血清,以含黄芪血清的DMEM培养基培养HDF细胞,同时以不含黄芪的家兔血清作空白对照,测试HDF的部分衰老指标。结果含黄芪的培养基培养的HDF细胞与空白血清培养的HDF细胞比较群体倍增时间减少,细胞活力增加;衰老相关-β-半乳糖苷酶(SA-β-gal)酶表达下降。结论含黄芪血清的培养基对HDF细胞具有一定的抗衰老作用。 展开更多
关键词 黄芪 血清药理 hdf 抗衰老
暂未订购
甘草黄酮对UVB损伤HDF细胞保护作用研究 被引量:6
16
作者 付维维 刘娟 +4 位作者 王业秋 李艳微 徐艳明 张宁 李建民 《安徽农业科学》 CAS 2016年第4期170-171,174,共3页
[目的]研究甘草黄酮对UVB照射后产生光老化现象的HDF细胞保护作用。[方法]采用30 m J/cm^2的UVB照射HDF细胞建立损伤模型;加入不同浓度的甘草黄酮,24 h后MTT法检测细胞活性;用试剂盒法测定细胞上清液中谷胱甘肽过氧化物酶(GSH-Px)、超... [目的]研究甘草黄酮对UVB照射后产生光老化现象的HDF细胞保护作用。[方法]采用30 m J/cm^2的UVB照射HDF细胞建立损伤模型;加入不同浓度的甘草黄酮,24 h后MTT法检测细胞活性;用试剂盒法测定细胞上清液中谷胱甘肽过氧化物酶(GSH-Px)、超氧化物歧化酶(SOD)活性、丙二醛(MDA)含量。[结果]甘草黄酮浓度为10^(-9)、10^(-10)、10^(-11)mol/L时,能使受UVB照射损伤的HDF细胞活性增强;甘草黄酮浓度为10^(-9)、10^(-10)mol/L时,GSH-Px、SOD活性升高,MDA含量降低;甘草黄酮浓度为10^(-11)mol/L时,SOD活性升高、MDA含量降低。[结论]甘草黄酮能减轻UVB对HDF细胞的损伤,其机制可能与抑制氧化损伤、提高SOD活性有关。 展开更多
关键词 甘草黄酮 光老化 UVB hdf细胞 保护作用
在线阅读 下载PDF
高密度燃料HDF-1与橡胶的相容性研究 被引量:7
17
作者 张香文 董飞 +1 位作者 周震寰 米镇涛 《燃料化学学报》 EI CAS CSCD 北大核心 2003年第4期342-348,共7页
报道了在室温和70℃下橡胶材料G402氟硅胶、丁腈胶5171、丁腈胶4170、贮囊橡胶用合成的高密度燃料HDF 1浸泡后性能如伸长率、邵尔硬度、重量、面积体积的变化,并与采用3号喷气燃料(RP 3)实验结果进行对照。用红外光谱测定了燃料浸泡前... 报道了在室温和70℃下橡胶材料G402氟硅胶、丁腈胶5171、丁腈胶4170、贮囊橡胶用合成的高密度燃料HDF 1浸泡后性能如伸长率、邵尔硬度、重量、面积体积的变化,并与采用3号喷气燃料(RP 3)实验结果进行对照。用红外光谱测定了燃料浸泡前后橡胶组成的变化。实验结果表明,G402氟硅胶和贮囊对于HDF 1和RP 3有相近的相容性,丁腈胶5171对HDF 1的相容性比对RP 3的相容性稍差,丁腈胶4170对HDF 1的相容性比对RP 3的相容性更差的结果。因此,丁腈胶5171和丁腈胶4170不能用于HDF 1储存和输送,原使用RP 3系统的橡胶密封件不能直接使用HDF 1。 展开更多
关键词 hdf-1 RP-3 相容性 燃料
在线阅读 下载PDF
基于用户信任值的HDFS访问控制模型研究 被引量:4
18
作者 史文浩 江国华 +1 位作者 秦小麟 王胜 《计算机科学与探索》 CSCD 北大核心 2016年第1期25-35,共11页
目前,越来越多的用户使用云存储来保存或备份数据,以增强数据的可移动性,但针对云存储的安全性问题,研究人员主要关注隐私泄露、数据容灾、副本消除等方面,对访问控制的研究较少。在前人研究的基础上,提出了一种基于用户信任值的HDFS(Ha... 目前,越来越多的用户使用云存储来保存或备份数据,以增强数据的可移动性,但针对云存储的安全性问题,研究人员主要关注隐私泄露、数据容灾、副本消除等方面,对访问控制的研究较少。在前人研究的基础上,提出了一种基于用户信任值的HDFS(Hadoop distributed file system)访问控制模型。该模型结合可信赖第三方认证系统Kerberos实现对用户的认证,并为每个用户设定一个信任值,通过信任值与信任值阈值的比较动态控制用户对HDFS的访问。实验结果表明,该模型不仅可以克服HDFS访问控制上的缺陷,而且能够动态、有效地控制用户对HDFS中资源的访问。 展开更多
关键词 云存储 hdfS 访问控制 信任值
在线阅读 下载PDF
利用GDAL扩展ArcGISEngine对HDF文件的支持 被引量:4
19
作者 申焕 石晓春 胡勇修 《测绘地理信息》 2013年第3期43-45,54,共4页
介绍了HDF格式和GDAL原理,重点研究了利用GDAL和ArcGIS Engine提供的接口来扩展ArcGIS Engine对HDF文件格式支持的技术实现,结果表明,利用GDAL可以扩展ArcGIS Engine对HDF文件的支持,最终实现多源空间数据访问。
关键词 遥感 hdf GDAL ARCGIS ENGINE
原文传递
基于hadoop云平台的智能电网HDFS资源存储技术研究 被引量:10
20
作者 孟祥萍 周来 《电测与仪表》 北大核心 2014年第19期24-30,共7页
面对未来智能电网海量存储资源的管理困难、可靠性低、维护分布式数据成本高等难题,文章首先在Hadoop云计算平台基础上搭建HDFS(Hadoop Distributed File System),论证了其强大的数据存储性能,并通过实验发现HDFS在进一步提高存储性能... 面对未来智能电网海量存储资源的管理困难、可靠性低、维护分布式数据成本高等难题,文章首先在Hadoop云计算平台基础上搭建HDFS(Hadoop Distributed File System),论证了其强大的数据存储性能,并通过实验发现HDFS在进一步提高存储性能方面的诸多瓶颈——节点状态信息缺失、系统负载不均、存储效率下降等。随后考虑HDFS原始方案的弊端并给出完善数据节点状态信息、设定数据副本系数的HDFS架构改进方案,最后通过在仿真平台上的实验,有效地平衡了节点间的负载,显著提高了存储效率,同时增强了用户体验,证明了该策略提高HDFS系统存储性能的可行性。 展开更多
关键词 智能电网 数据存储 HADOOP hdfS
在线阅读 下载PDF
上一页 1 2 42 下一页 到第
使用帮助 返回顶部