期刊导航
期刊开放获取
vip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
8
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于Lustre文件系统的MPI-IO编程接口改进
被引量:
1
1
作者
王巍
李旺
《电子技术应用》
北大核心
2012年第5期128-131,共4页
针对传统MPI集群并行I/O效率不高的问题,通过分析Lustre并行文件系统的特点和MPI-IO集中式I/O操作的算法,提出了一种基于MPI-IO编程接口的改进方案,用以改善集群I/O瓶颈,提高I/O并行效率,并通过实验验证了该方案的可行性。
关键词
并行文件系统
编程接口
集中式I/O
LUSTRE
mpi-io
在线阅读
下载PDF
职称材料
MPI-IO中Collective I/O的优化
2
作者
李胜利
张琦
+1 位作者
陈宝利
张浩
《计算机工程与科学》
CSCD
2005年第2期65-67,共3页
本文对MPI-IO库中Collective I/O的实现算法Two-phase I/O提出了改进。通过选取主联络进程来减少第 一阶段进程间的通信量,从而减少Two-phase I/O方法在通信过程中的时间消耗,提高了整体的I/O性能。
关键词
mpi-io
COLLECTIVE
I/O算法
计算机
优化
在线阅读
下载PDF
职称材料
面向非易失内存的MPI-IO接口优化
被引量:
1
3
作者
邓镇龙
陈志广
《大数据》
2021年第2期172-181,共10页
在高性能计算环境中,MPI应用多个计算节点同时访问底层存储系统文件时,其I/O开销受到访问模式和外存设备性能的影响。针对MPI应用访问文件的特征,利用非易失内存高带宽、低时延、可字节寻址、数据可持久化等优势,提出面向非易失内存的MP...
在高性能计算环境中,MPI应用多个计算节点同时访问底层存储系统文件时,其I/O开销受到访问模式和外存设备性能的影响。针对MPI应用访问文件的特征,利用非易失内存高带宽、低时延、可字节寻址、数据可持久化等优势,提出面向非易失内存的MPI-IO接口优化方案;对文件数据建立分布式的缓存并维护持久性的元数据、对进程间数据传输策略进行优化,使应用可以有效管理、利用非易失内存设备,保持缓存数据一致有效。实验结果证明,所提系统为应用带来数十倍的读写性能提升。未来将进一步优化本方案的并行性。
展开更多
关键词
非易失内存
mpi-io
分布式数据缓存
在线阅读
下载PDF
职称材料
海洋环流模式的并行I/O优化研究
4
作者
李云龙
祝子杰
+4 位作者
孟祥飞
朱小谦
林鹏飞
刘海龙
李庚
《计算机工程与应用》
CSCD
北大核心
2024年第17期263-271,共9页
极端气象日益加剧,严重影响人类的生产生活。如何有效应对未来极端环境变化,更关乎国际竞争。因此,发展高精度高分辨率的地球系统模式推动气候变化研究至关重要。随着模式精度和分辨率的不断提高,I/O性能已成为制约模式计算效率和可扩...
极端气象日益加剧,严重影响人类的生产生活。如何有效应对未来极端环境变化,更关乎国际竞争。因此,发展高精度高分辨率的地球系统模式推动气候变化研究至关重要。随着模式精度和分辨率的不断提高,I/O性能已成为制约模式计算效率和可扩展性的瓶颈。选取典型的海洋环流模式LICOM3作为研究对象,基于天河HPC系统,详细测试和分析了模式的I/O逻辑过程,发现在3K进程规模下I/O可占整体运行时间一半以上,是限制模式计算性能的关键因素。为此,设计并实现了主要输出过程的MPI-IO并行优化方案,显著提升了模式运行效率,基本解决了模式I/O瓶颈。测试结果表明,MPI-IO并行优化方案将输出时间占比从48.58%降到2.44%,将输出带宽提升到6.21 GB/s,约是原程序的14倍。此外,进一步分析了影响并行I/O性能的因素,以期为相关工作提供参考和指导。
展开更多
关键词
并行I/O优化
海洋环流模式
mpi-io
在线阅读
下载PDF
职称材料
基于FFT并行算法的并行I/O性能的研究
5
作者
张贯虹
高玲玲
《电脑知识与技术》
2008年第11X期1373-1375,共3页
该研究对象为并行计算机的I/O性能,将任务分发给不同的处理结点,通过进程间的相互协调、有序合作完成FFT并行算法的实现。在完成任务的过程中,通过记录I/O时间与计算时间,求出I/O性能与计算性能,通过分析比较数据从而认识I/O性能的重要...
该研究对象为并行计算机的I/O性能,将任务分发给不同的处理结点,通过进程间的相互协调、有序合作完成FFT并行算法的实现。在完成任务的过程中,通过记录I/O时间与计算时间,求出I/O性能与计算性能,通过分析比较数据从而认识I/O性能的重要性。研究计算机的I/O性能对于如何进一步改进系统以及提高资源利用率具有重要意义。
展开更多
关键词
并行计算机系统
I/O性能
并行I/O
MPI
mpi-io
在线阅读
下载PDF
职称材料
基于MPI的并行I/O方法
被引量:
5
6
作者
李小卫
罗省贤
《微型机与应用》
2003年第3期13-14,21,共3页
基于MPI-2规范的并行I/O方法,以并行矩阵乘法问题为例,比较了并行I/O和串行I/O的性能,给出了并行I/O方法的应用实例。
关键词
并行I/0
MPI-2规范
mpi-io
规范
并行计算
在线阅读
下载PDF
职称材料
GPFS文件系统原理和模式IO优化方法
被引量:
6
7
作者
杨昕
《气象科技》
2006年第B09期27-30,共4页
GPFS(通用并行文件系统)普遍应用于IBM大规模集群系统中,能够为并行应用程序提供高性能的I/O存取访问。该文介绍了GPFS的原理和工作机制,并以安装在国家气象信息中心的IBM高性能计算机系统为试验平台,初步测试了在实际环境中GPFS的应用...
GPFS(通用并行文件系统)普遍应用于IBM大规模集群系统中,能够为并行应用程序提供高性能的I/O存取访问。该文介绍了GPFS的原理和工作机制,并以安装在国家气象信息中心的IBM高性能计算机系统为试验平台,初步测试了在实际环境中GPFS的应用情况,在应用程序中对文件访问进行性能优化的方式有2种:①由主任务负责全部文件访问,②通过MPI-IO在GPFS中实现并行文件访问。测试结果表明,GPFS可以提供很好的文件访问支持,但要想获得较高的性能,需要在应用程序中进行深入调试。
展开更多
关键词
并行模式
GPFS
CLUSTER
COMPUTING
I/O优化MPI—IO
在线阅读
下载PDF
职称材料
使用MPI的并行I/O实现及性能分析
被引量:
5
8
作者
杨伟光
李文
《计算机工程与应用》
CSCD
北大核心
2006年第17期96-98,110,共4页
论文讨论了并行环境中I/O的基本方法——串行I/O方法和并行I/O方法,并使用MPI-1及MPI-2对这两种方法进行了实现。分析了不同的实现方法对I/O带宽产生的影响。通过理论分析和实验表明,基于MPI-2的并行I/O实现方法与其它I/O实现方法相比,...
论文讨论了并行环境中I/O的基本方法——串行I/O方法和并行I/O方法,并使用MPI-1及MPI-2对这两种方法进行了实现。分析了不同的实现方法对I/O带宽产生的影响。通过理论分析和实验表明,基于MPI-2的并行I/O实现方法与其它I/O实现方法相比,可得到更高的I/O带宽,是解决I/O性能问题的有效途径。
展开更多
关键词
并行I/O
I/O性能
MPI
MPI—IO
在线阅读
下载PDF
职称材料
题名
基于Lustre文件系统的MPI-IO编程接口改进
被引量:
1
1
作者
王巍
李旺
机构
集美大学计算机工程学院
出处
《电子技术应用》
北大核心
2012年第5期128-131,共4页
文摘
针对传统MPI集群并行I/O效率不高的问题,通过分析Lustre并行文件系统的特点和MPI-IO集中式I/O操作的算法,提出了一种基于MPI-IO编程接口的改进方案,用以改善集群I/O瓶颈,提高I/O并行效率,并通过实验验证了该方案的可行性。
关键词
并行文件系统
编程接口
集中式I/O
LUSTRE
mpi-io
Keywords
parallel file system
programming interface
collective I/O
Lustre
mpi-io
分类号
TP393 [自动化与计算机技术—计算机应用技术]
在线阅读
下载PDF
职称材料
题名
MPI-IO中Collective I/O的优化
2
作者
李胜利
张琦
陈宝利
张浩
机构
华中科技大学计算机科学与技术学院
出处
《计算机工程与科学》
CSCD
2005年第2期65-67,共3页
基金
科技部科技型中小企业技术创新基金项目(01C26214210289)
文摘
本文对MPI-IO库中Collective I/O的实现算法Two-phase I/O提出了改进。通过选取主联络进程来减少第 一阶段进程间的通信量,从而减少Two-phase I/O方法在通信过程中的时间消耗,提高了整体的I/O性能。
关键词
mpi-io
COLLECTIVE
I/O算法
计算机
优化
Keywords
mpi-io
collective I/O
two-phase I/O
分类号
TP301.6 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
面向非易失内存的MPI-IO接口优化
被引量:
1
3
作者
邓镇龙
陈志广
机构
中山大学计算机学院
出处
《大数据》
2021年第2期172-181,共10页
基金
国家重点研发计划资助项目(No.2018YFB0203904)
国家自然科学基金资助项目(No.61872392,No.61832020,No.U1811461)
+1 种基金
广东省自然科学基金资助项目(No.2018B030312002)
广州市珠江科技新星项目(No.201906010008)。
文摘
在高性能计算环境中,MPI应用多个计算节点同时访问底层存储系统文件时,其I/O开销受到访问模式和外存设备性能的影响。针对MPI应用访问文件的特征,利用非易失内存高带宽、低时延、可字节寻址、数据可持久化等优势,提出面向非易失内存的MPI-IO接口优化方案;对文件数据建立分布式的缓存并维护持久性的元数据、对进程间数据传输策略进行优化,使应用可以有效管理、利用非易失内存设备,保持缓存数据一致有效。实验结果证明,所提系统为应用带来数十倍的读写性能提升。未来将进一步优化本方案的并行性。
关键词
非易失内存
mpi-io
分布式数据缓存
Keywords
non-volatile memory
mpi-io
distributed data cache
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
在线阅读
下载PDF
职称材料
题名
海洋环流模式的并行I/O优化研究
4
作者
李云龙
祝子杰
孟祥飞
朱小谦
林鹏飞
刘海龙
李庚
机构
国家超级计算天津中心
国防科技大学气象海洋学院
中国科学院大气物理研究所大气科学和地球流体力学数值模拟国家重点实验室
出处
《计算机工程与应用》
CSCD
北大核心
2024年第17期263-271,共9页
基金
国家重点研发计划项目(2021YFC3101503)。
文摘
极端气象日益加剧,严重影响人类的生产生活。如何有效应对未来极端环境变化,更关乎国际竞争。因此,发展高精度高分辨率的地球系统模式推动气候变化研究至关重要。随着模式精度和分辨率的不断提高,I/O性能已成为制约模式计算效率和可扩展性的瓶颈。选取典型的海洋环流模式LICOM3作为研究对象,基于天河HPC系统,详细测试和分析了模式的I/O逻辑过程,发现在3K进程规模下I/O可占整体运行时间一半以上,是限制模式计算性能的关键因素。为此,设计并实现了主要输出过程的MPI-IO并行优化方案,显著提升了模式运行效率,基本解决了模式I/O瓶颈。测试结果表明,MPI-IO并行优化方案将输出时间占比从48.58%降到2.44%,将输出带宽提升到6.21 GB/s,约是原程序的14倍。此外,进一步分析了影响并行I/O性能的因素,以期为相关工作提供参考和指导。
关键词
并行I/O优化
海洋环流模式
mpi-io
Keywords
parallel I/O optimization
ocean circulation model
mpi-io
分类号
TP302.7 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
基于FFT并行算法的并行I/O性能的研究
5
作者
张贯虹
高玲玲
机构
合肥学院网络与智能信息处理重点实验室
出处
《电脑知识与技术》
2008年第11X期1373-1375,共3页
基金
合肥学院2008年度院科研发展基金项目(08KY018ZR)
文摘
该研究对象为并行计算机的I/O性能,将任务分发给不同的处理结点,通过进程间的相互协调、有序合作完成FFT并行算法的实现。在完成任务的过程中,通过记录I/O时间与计算时间,求出I/O性能与计算性能,通过分析比较数据从而认识I/O性能的重要性。研究计算机的I/O性能对于如何进一步改进系统以及提高资源利用率具有重要意义。
关键词
并行计算机系统
I/O性能
并行I/O
MPI
mpi-io
Keywords
parallel computer
I/O performance
parallel I/O
MPI,
mpi-io
分类号
TP301.6 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
基于MPI的并行I/O方法
被引量:
5
6
作者
李小卫
罗省贤
机构
四川成都理工大学信息工程学院
出处
《微型机与应用》
2003年第3期13-14,21,共3页
文摘
基于MPI-2规范的并行I/O方法,以并行矩阵乘法问题为例,比较了并行I/O和串行I/O的性能,给出了并行I/O方法的应用实例。
关键词
并行I/0
MPI-2规范
mpi-io
规范
并行计算
分类号
TP311.1 [自动化与计算机技术—计算机软件与理论]
TP336 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
GPFS文件系统原理和模式IO优化方法
被引量:
6
7
作者
杨昕
机构
国家气象信息中心高性能计算机室
出处
《气象科技》
2006年第B09期27-30,共4页
文摘
GPFS(通用并行文件系统)普遍应用于IBM大规模集群系统中,能够为并行应用程序提供高性能的I/O存取访问。该文介绍了GPFS的原理和工作机制,并以安装在国家气象信息中心的IBM高性能计算机系统为试验平台,初步测试了在实际环境中GPFS的应用情况,在应用程序中对文件访问进行性能优化的方式有2种:①由主任务负责全部文件访问,②通过MPI-IO在GPFS中实现并行文件访问。测试结果表明,GPFS可以提供很好的文件访问支持,但要想获得较高的性能,需要在应用程序中进行深入调试。
关键词
并行模式
GPFS
CLUSTER
COMPUTING
I/O优化MPI—IO
Keywords
parallel model, GPFS, cluster computing, I/O optimization,
mpi-io
分类号
TP316 [自动化与计算机技术—计算机软件与理论]
在线阅读
下载PDF
职称材料
题名
使用MPI的并行I/O实现及性能分析
被引量:
5
8
作者
杨伟光
李文
机构
内蒙古大学计算机学院
出处
《计算机工程与应用》
CSCD
北大核心
2006年第17期96-98,110,共4页
基金
国家自然科学基金资助项目(编号:60303033)
内蒙古自然科学基金资助项目(编号:200308020212)
+1 种基金
内蒙古高校科学研究项目(编号:NJ03120)
内蒙古大学博士科研启动基金资助项目
文摘
论文讨论了并行环境中I/O的基本方法——串行I/O方法和并行I/O方法,并使用MPI-1及MPI-2对这两种方法进行了实现。分析了不同的实现方法对I/O带宽产生的影响。通过理论分析和实验表明,基于MPI-2的并行I/O实现方法与其它I/O实现方法相比,可得到更高的I/O带宽,是解决I/O性能问题的有效途径。
关键词
并行I/O
I/O性能
MPI
MPI—IO
Keywords
parallel I/O,I/O performance,MPI,
mpi-io
分类号
TP301 [自动化与计算机技术—计算机系统结构]
在线阅读
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于Lustre文件系统的MPI-IO编程接口改进
王巍
李旺
《电子技术应用》
北大核心
2012
1
在线阅读
下载PDF
职称材料
2
MPI-IO中Collective I/O的优化
李胜利
张琦
陈宝利
张浩
《计算机工程与科学》
CSCD
2005
0
在线阅读
下载PDF
职称材料
3
面向非易失内存的MPI-IO接口优化
邓镇龙
陈志广
《大数据》
2021
1
在线阅读
下载PDF
职称材料
4
海洋环流模式的并行I/O优化研究
李云龙
祝子杰
孟祥飞
朱小谦
林鹏飞
刘海龙
李庚
《计算机工程与应用》
CSCD
北大核心
2024
0
在线阅读
下载PDF
职称材料
5
基于FFT并行算法的并行I/O性能的研究
张贯虹
高玲玲
《电脑知识与技术》
2008
0
在线阅读
下载PDF
职称材料
6
基于MPI的并行I/O方法
李小卫
罗省贤
《微型机与应用》
2003
5
在线阅读
下载PDF
职称材料
7
GPFS文件系统原理和模式IO优化方法
杨昕
《气象科技》
2006
6
在线阅读
下载PDF
职称材料
8
使用MPI的并行I/O实现及性能分析
杨伟光
李文
《计算机工程与应用》
CSCD
北大核心
2006
5
在线阅读
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部