-
题名移动设备日志结构文件系统综述
被引量:1
- 1
-
-
作者
杨梨花
董勇
邬会军
谭支鹏
王芳
卢凯
-
机构
国防科技大学计算机学院
信息存储系统教育部重点实验室(华中科技大学)
-
出处
《计算机研究与发展》
北大核心
2025年第1期58-74,共17页
-
基金
全国重点实验室基金项目(2023-KJWPDL-11)
湖南省自然科学基金项目(2024JJ6471,2023RC3021)
+1 种基金
国家自然科学基金项目(62306328,U22B2005)
高性能计算国家重点实验室基金项目(202101-03)。
-
文摘
NAND闪存(NAND flash)因为其大容量、轻便、抗震等优异特性,被广泛使用于移动设备.面向闪存特性设计的闪存友好型文件系统(flash friendly file system,F2FS)是典型的日志结构文件系统(log-structured file system,LFS),它采用日志结构写机制提升了随机写性能,使用前滚恢复技术实现快速的一致性保护,经常被用作移动设备的文件系统.文件系统因碎片化和段清理问题导致性能下降,而日志结构文件系统的异地更新机制和移动应用的高并发随机同步小写模式进一步加剧了碎片化,导致I/O请求响应变慢、设备运行卡顿.首先介绍了移动设备日志结构文件系统的相关概念和内容,随后总结了日志结构文件系统碎片化和段清理问题的研究现状.一方面分析了碎片产生的原因与影响,从预防碎片产生和重整碎片2个角度总结了减少碎片的研究工作.另一方面分析了冷热数据混合对段清理的影响,从静态分类和动态分类2方面总结了冷热数据区分技术的研究现状,从管理数据分布和调整段清理时机、频率、对象2个角度总结了段清理的研究现状.最后展望了移动设备日志结构文件系统研究的主要挑战和未来研究工作.
-
关键词
日志结构文件系统
移动存储
文件碎片
空闲空间碎片
段清理
冷热数据区分
-
Keywords
log-structured file system
mobile storage
file fragmentation
free space fragmentation
segment cleaning
hot and cold data distinction
-
分类号
TP302.1
[自动化与计算机技术—计算机系统结构]
-
-
题名基于偏最小二乘法的RoboCup传球研究
被引量:4
- 2
-
-
作者
秦锋
田杰
程泽凯
-
机构
安徽工业大学计算机学院
-
出处
《计算机工程》
CAS
CSCD
2014年第9期275-279,共5页
-
基金
安徽高校省级自然科学研究基金资助项目(KJ2011A039)
-
文摘
传球动作是RoboCup仿真足球比赛得以进行的纽带,进球并赢得比赛是球队的最终目标,分析传球与比赛胜负的关系,采用数据挖掘的思想,用C语言程序解析仿真比赛日志文件的方法来收集所需的传球数据,基于距离将传球分为5种类型,以5种类型的传球作为解释变量,以比分作为因变量,采用偏最小二乘法搭建数学模型,用SIMCA-P软件进行仿真实验,并采用相关图形进行分析与说明。在包含解释变量72.8%、因变量74.4%信息量的情况下,5个解释变量对因变量的投影重要性指标值分别为0.081 14,0.996 66,1.028 9,1.088 06,1.325 73。实验结果表明,对传球来说,长传球对比赛胜负的影响最大。
-
关键词
多智能体系统
日志文件
数学建模
偏最小二乘法
回归分析
多重共线性
-
Keywords
Multi-Agent system(MAS)
log file
mathematical modeling
Partial Least Square(PLS)
regression analysis
multi-collinearity
-
分类号
TP18
[自动化与计算机技术—控制理论与控制工程]
-
-
题名NTFS文件系统结构分析
被引量:16
- 3
-
-
作者
王兰英
居锦武
-
机构
四川理工学院计算机科学系
-
出处
《计算机工程与设计》
CSCD
北大核心
2006年第3期418-419,484,共3页
-
文摘
详细分析了WindowsNT操作系统使用的NTFS文件系统的基本结构,深入剖析了其主控文件表MFT、MFT记录、文件结构和目录结构等基本数据的结构。针对NTFS的卷结构、目录与文件结构、日志文件系统、故障时数据恢复等方面进行了研究。NTFS使用日志文件系统实现系统的数据故障恢复功能,对数据恢复过程及过程中日志文件系统的使用给出了详细的说明。
-
关键词
NTFS文件系统
卷
主控文件表
日志文件
数据恢复
-
Keywords
NTFS file system
volume
master file-table
logging file
data recovery
-
分类号
TP316.86
[自动化与计算机技术—计算机软件与理论]
-
-
题名文件系统中日志技术的研究
被引量:15
- 4
-
-
作者
林晓东
刘心松
-
机构
电子科技大学计算机系
-
出处
《计算机应用》
CSCD
1998年第1期28-30,共3页
-
文摘
本文分析了日志技术在现代文件系统中的应用实现的主要特点与问题,并总结了在文件系统中使用日志技术需解决的问题。
-
关键词
文件系统
UNIX
日志技术
操作系统
-
Keywords
file system,log,Quick crash recovery,Performance
-
分类号
TP316
[自动化与计算机技术—计算机软件与理论]
-
-
题名日志结构云存储中缓存的设计与实现
被引量:6
- 5
-
-
作者
陈莉君
王森
康华
-
机构
西安邮电大学计算机学院
-
出处
《西安邮电大学学报》
2013年第5期76-80,共5页
-
基金
陕西省教育厅自然科学基金资助项目(11JK1069)
-
文摘
日志结构分布式文件系统(HDFS-based Log-structured File System,HLFS)是基于Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)构建的云存储平台,为了提高其数据读写性能,结合HLFS客户端与后台存储集群相分离的特点,利用最近最久未使用算法作为缓存策略,在HLFS客户端内存中设计并实现HLFS缓存,并采用固定时间间隔刷新缓存的策略来保证数据一致性。在集群系统上对所设计的缓存进行了数据读写测试,结果表明,该设计能够有效地降低HLFS与后台集群的交互频率,减少用户感知的数据读写时间。
-
关键词
分布式文件系统(DFS)
缓存技术
日志结构文件系统(LFS)
-
Keywords
distributed file system(DFS), cache technology, log-structured file system(LFS)
-
分类号
TP311.5
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于NAND型闪存的嵌入式文件系统设计
被引量:22
- 6
-
-
作者
李庆诚
孙明达
-
机构
南开大学信息技术科学学院嵌入式系统与信息安全实验室
-
出处
《计算机应用研究》
CSCD
北大核心
2006年第4期231-233,239,共4页
-
文摘
由于具有高密度和良好的存取速率等特点,NAND型闪存在嵌入式系统领域中被广泛应用,但其所固有的擦除-写入更新机制以及高坏块率等特性却又成为其在应用中的障碍。提出了一种基于NAND型闪存的日志结构嵌入式文件系统,用于充分利用NAND型闪存的优势并克服其缺陷。文件系统在嵌入式Linux操作系统中予以实现,并进行了性能测试。
-
关键词
NAND闪存
日志结构文件系统
嵌入式LINUX
-
Keywords
NAND Flash Memory
log Structured file system
Embedded Linux
-
分类号
TP316
[自动化与计算机技术—计算机软件与理论]
-
-
题名云存储日志文件系统中快照的设计与实现
被引量:4
- 7
-
-
作者
陈莉君
康华
贾威威
-
机构
西安邮电大学
-
出处
《计算机应用与软件》
CSCD
北大核心
2013年第7期204-208,共5页
-
基金
陕西省教育厅自然科学基金项目(11JK1069)
-
文摘
在逐步分析云存储日志文件系统中快照机制的基础上,设计并实现了基于HLFS(Hadoop DFS log-structured File-system)云存储日志文件系统的快照系统。通过在HLFS中添加新的快照,从快照系统中就可以随时获取该快照的信息,并恢复该快照时的所有数据,使云存储系统能够及时地进行数据恢复,从而避免云存储中核心数据的丢失,保证云存储中数据的安全性。为尽可能提高云存储日志文件系统中快照系统的可扩展性与实用性,详细分析快照在云存储日志文件系统中的设计与实现,并结合其他快照,分析了HLFS快照的实现性能。
-
关键词
云存储
日志文件系统
快照
-
Keywords
Cloud storage log-structured file-system Snapshot
-
分类号
TP311.5
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于系统日志文件的计算机系统脆弱性分析
被引量:6
- 8
-
-
作者
黄波
-
机构
辽宁警官高等专科学校公安信息系
-
出处
《信息网络安全》
2012年第10期68-70,共3页
-
文摘
随着信息社会的发展,计算机系统的安全是信息社会中信息安全保障的重要部分之一。文章根据Windows系统、数据库系统、防火墙系统的日志文件形式、结构、内容的组成,分析了在计算机操作系统、网络系统中日志文件的安全性及其安全作用,并阐述了实现计算机系统脆弱性分析的根源。
-
关键词
计算机系统
日志文件
脆弱性
安全性分析
-
Keywords
computer system
log file
vulnerability
safety analysis
-
分类号
TP309
[自动化与计算机技术—计算机系统结构]
-
-
题名面向IMA综合处理系统的日志管理系统设计与实现
被引量:1
- 9
-
-
作者
段海军
邸海涛
张树兵
刘建军
陈福
-
机构
中航工业西安航空计算技术研究所
-
出处
《航空计算技术》
2012年第6期75-79,共5页
-
基金
国家"核高基"项目资助(2012ZX01041-006)
-
文摘
针对IMA综合处理系统的大规模软件运行需求,在分析其特点的基础上,提出了一种易于实现、使用方便的日志管理系统。系统主要分为三部分:基于Flash的日志管理、基于文件系统的日志管理和远程日志管理。在配有文件系统的模块上,提供了基于文件系统的日志管理,利用文件系统对数据管理的方式,管理日志记录的读写以及存储;在没有文件系统的模块上,提供基于Flash的日志管理,并根据Flash每次写一个扇区的特点,设计了异步写日志记录的机制,提高了Flash的写效率;同时设计了远程存取日志记录的机制,允许模块远程存取日志记录,扩大了日志记录的存储规模。系统是针对IMA综合处理系统的特点设计,能够满足航空电子系统对日志管理的需求。
-
关键词
IMA
日志管理
FLASH
文件系统
远程日志
-
Keywords
IMA
log management
flash
file system
remote log
-
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种基于LSM树的键值存储系统性能优化方法
被引量:6
- 10
-
-
作者
王海涛
李战怀
张晓
赵晓南
-
机构
西北工业大学计算机学院
大数据存储与管理工业和信息化部重点实验室(西北工业大学)
-
出处
《计算机研究与发展》
EI
CSCD
北大核心
2019年第8期1792-1802,共11页
-
基金
国家重点研发计划项目(2018YFB1004401)
国家自然科学基金青年科学基金项目(61502392)
国家自然基金面上项目(61472323)~~
-
文摘
目前,键值(key-value, KV)存储系统在众多数据密集型的应用系统中发挥着关键作用,例如页面索引、电子商务以及云存储系统等.在各种键值存储系统中,基于日志结构合并(log-structured merge, LSM)树的KV存储系统获得了广泛的应用.主要原因是基于LSM树的KV存储系统能够将随机写操作转化为顺序写操作,从而提升数据写性能.然而,这些存储系统也存在一些严重的性能问题.一方面,KV存储系统利用预写日志机制来保证写入数据的原子性和安全性,以便在系统发生故障时进行恢复,造成了数据的写放大.同时,日志的频繁更新也引入了严重的元数据负载,导致了额外的性能开销.另一方面,KV存储系统通常利用通用文件系统存储数据,而通用文件系统中许多KV存储系统不需要的功能和属性也会造成一定的性能开销.为了减小这些开销、提升KV存储系统写入性能,提出了RocksFS,一个针对基于LSM树的KV存储系统优化的文件系统.针对KV存储系统的负载模式简化文件系统结构,去除通用文件系统引入的负载,同时优化预写日志的存储结构和更新流程以减小其更新负载,提升写入性能.最后在普通硬盘和固态硬盘上,基于流行的KV存储系统RocksDB验证了该方法的有效性,结果显示相对于通用文件系统,RocksFS能够将小块KV数据写入和更新性能提高约8倍.
-
关键词
LSM树
键值存储
文件系统
预写日志
写性能
-
Keywords
LSM-tree
key-value store
file system
write-ahead log (WAL)
write performance
-
分类号
TP315
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于日志内容的Web系统评价
被引量:1
- 11
-
-
作者
陈汶滨
赵萍萍
王申申
-
机构
西南石油大学
-
出处
《信息技术》
2010年第5期205-206,共2页
-
文摘
近年来随着计算机网络技术的迅猛发展,Web系统的应用渗入到社会的各个领域,在Web系统规模不断扩大的同时其复杂性也变得越来越高。由于Web应用系统具有异构、分布、并发和平台无关的特点。因此,对Web应用系统的软件质量管理,具有其特殊性。提出了一个针对Web应用系统质量评估的新方法,该方法利用Web系统日志文件中提取吞吐量和并发用户数目等相关信息,通过对这些信息的研究、分析、处理,得出对该Web应用系统的质量评价。
-
关键词
软件质量
WEB应用系统
日志文件
-
Keywords
software quality
Web application system
log files
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名基于Linux内核的智能日志生成系统
被引量:2
- 12
-
-
作者
刘洪武
梁亮
杨国为
宋高俊
-
机构
南昌航空大学信息工程学院
-
出处
《计算机工程》
CAS
CSCD
2012年第18期255-257,共3页
-
基金
国家自然科学基金资助项目(60973048)
航空科学基金资助项目(20102056005)
江西省教育厅青年科学基金资助项目(GJJ10194)
-
文摘
提出一种日志生成系统,克服传统系统不能在进程中随意更改日志生成的模块与级别。通过修改配置文件和用动态命令2种方式,进行不同模块、不同级别的日志选择性生成。该设计可以用扫描配置文件的方式,根据配置文件中不同模块与级别的标识更新日志生成列表,也可以在进程运行当中,以人机交互的命令通过进程间通信的方法更新日志生成列表,再调用API接口实现按需生成日志。测试结果表明,该设计可以实现按需求输出日志的功能。
-
关键词
日志生成系统
配置文件
动态命令
LINUX内核
系统调用
API接口
进程间通信
-
Keywords
log generation system; configuration file; dynamic command; Linux kernel; system call; API-interface; Inter-process Communication(IPC);
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名无纸化考试系统的安全性能改进
被引量:4
- 13
-
-
作者
罗兵
周贤善
-
机构
荆州师范学院信息学科学院
-
出处
《荆州师范学院学报》
2001年第5期28-30,共3页
-
文摘
在计算机无纸化考试系统中 ,存在着试题泄密、成绩篡改、软件被破坏等安全隐患 .本文提出了采取考试环境使用NTFS文件系统和Windows 2 0 0 0操作系统 ;考试软件使用加密、防复制技术、设置考生口令、产生安全日志等两方面的措施来改进考试系统的安全性能 ,同时使考试系统仍具有相当的灵活性 .
-
关键词
计算机专业考试
安全性能
改进
考试环境
考试软件
无纸化考试系统
系统安全
加密
安全日志
用户名
口令
灵活性
-
Keywords
computer examination
system safety
encryption
log file
-
分类号
TP3-4
[自动化与计算机技术—计算机科学与技术]
TP309
[自动化与计算机技术—计算机系统结构]
-
-
题名Oracle重做日志文件对医保系统性能影响分析
被引量:1
- 14
-
-
作者
王文翠
李志强
秦芳
高轶
-
机构
沈阳军区总医院信息科
沈阳军区联勤部后勤信息中心
-
出处
《中国数字医学》
2015年第8期82-83,100,共3页
-
文摘
目的:对沈阳军区总医院医保系统进行优化,解决目前出现的性能瓶颈。方法:从性能优化实际出发,分析Oracle数据库的数据更新过程与重做日志机制,通过调整日志文件的方式提高医保系统的性能。结果:系统响应时间明显缩短,性能得到显著提升。结论:实践证明,能够提升系统的稳定性以及事务处理能力,调整方案切实有效。
-
关键词
医保系统
ORACLE数据库
日志文件
-
Keywords
medical insurance management system, oracle database, redo log file
-
分类号
R197.324
[医药卫生—卫生事业管理]
R319
[医药卫生—基础医学]
-
-
题名基于代理服务器的校园网计费系统
被引量:5
- 15
-
-
作者
姜良华
-
机构
桂林工学院网络中心
-
出处
《桂林工学院学报》
1999年第3期226-229,共4页
-
文摘
计费是校园网网络管理中一个重要方面,针对面向IP计费存在面向机器与可能被盗用的缺陷,介绍了基于代理服务器面向用户的校园网计费方案,对计费原理和系统模型作了较详细的阐述,并结合校园网流量计费系统的开发,介绍了数据采集、计费处理、收费规则维护及数据查询等主要模块的设计。
-
关键词
校园网
计费系统
代理服务器
日志文件
-
Keywords
campus network
accounting system
proxy server
log file
-
分类号
G434
[文化科学—教育技术学]
-
-
题名基于Free BSD的日志服务器系统的设计与应用
被引量:1
- 16
-
-
作者
陈海川
-
机构
西华大学电气信息学院
-
出处
《西华大学学报(自然科学版)》
CAS
2006年第2期8-9,41,共3页
-
文摘
在目前的网络系统安全中,多数的网络安全设备记录的用户信息往往是不全面的,因此本文通过对FreeBSD系统提供的数据包过滤模块进行了分析和二次开发,以及对该包过滤模块产生的日志信息数据进行了必要的处理,设计出了一种能够获取网络用户全面信息的网络安全设备———日志服务器系统。
-
关键词
FREEBSD系统
安全审计
日志文件
-
Keywords
Free BSD system
security audit
log file
-
分类号
TP316.81
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于Hadoop的在线网络日志分析系统研究
被引量:12
- 17
-
-
作者
杨锋英
刘会超
-
机构
黄淮学院信息工程学院
黄淮学院网络信息管理中心
-
出处
《计算机应用与软件》
CSCD
北大核心
2014年第8期311-316,共6页
-
基金
河南省科技攻关计划项目(122102310474)
-
文摘
网络日志分析对网络安全管理具有重要意义,但现有的网络日志分析系统具有无法处理海量日志数据、采用离线模式、处理时延较长等弊端。因此,提出网络日志数据的分级归档机制,实现海量数据的分级优化存储功能。通过将传统的网络日志分析模式和基于Hadoop的离线处理模式相结合,设计基于Hadoop的在线网络日志分析系统,并深入分析系统的功能架构和业务处理流程。实验结果表明:该系统具有良好的可扩展性,可以有效存储处理海量日志数据,具有较快的请求响应速度,并能够满足在线处理的要求。从而验证了系统设计的可行性和有效性。
-
关键词
网络安全
日志分析
HADOOP
文件分级归档
在线系统
-
Keywords
Network security log analysis Hadoop Hierarchical file storage Online system
-
分类号
TP311.1
[自动化与计算机技术—计算机软件与理论]
-
-
题名文件系统可靠管理方法研究
被引量:1
- 18
-
-
作者
杨琼
任晓瑞
王冬
-
机构
航空工业西安航空计算技术研究所
-
出处
《航空计算技术》
2024年第1期95-98,共4页
-
基金
国家重点研发计划项目资助(2017YFB1301100)。
-
文摘
针对系统突发掉电情况下文件系统的可靠性问题,研究一种文件系统可靠管理方法,采用元数据事务管理技术,在数据更新时采用写时拷贝技术实现异地更新,采用PING PONG日志管理技术,对文件系统的空间和节点分配情况采用两级日志进行维护,系统维护两份事务点日志记录;通过逻辑卷管理关键数据的冗余存储,防止掉电时超级块数据被破坏引起系统无法正常启动。测试表明方法能够解决突发掉电情况下文件系统状态的一致性问题,实现文件系统的可靠管理。
-
关键词
PINGPONG日志
事务
文件系统
可靠性
一致性
-
Keywords
PING PONG log
transactions
file system
reliability
consistency
-
分类号
TP334.7
[自动化与计算机技术—计算机系统结构]
TP333
[自动化与计算机技术—计算机系统结构]
TP316
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于AOP的人事档案日志模块设计与实现
被引量:1
- 19
-
-
作者
吴海涛
李福荣
-
机构
黄淮学院国际学院
-
出处
《计算机与现代化》
2016年第9期83-86,共4页
-
基金
河南省自然科学基金研究资助项目(142300410288
132400411178)
-
文摘
在分析人事档案功能模块的基础上,采用面向方面编程(AOP)技术将日志从功能模块中分离出来,并将日志作为一个独立的模块。该模块使用方面类Aspect Log中的通知实现日志记录在业务操作后,写入到数据库的日志表中,并采用DAO模式实现日志的显示和维护。实际系统运行结果表明,本文提出的基于AOP技术解决日志模块的设计思想具有可行性,并具有一定的理论价值和应用价值。
-
关键词
面向方面编程
人事档案系统
日志模块
非功能属性
-
Keywords
aspect-oriented programming
personnel file system
logging module
non-functional attributes
-
分类号
TP311
[自动化与计算机技术—计算机软件与理论]
-
-
题名软件DSM系统的重放
- 20
-
-
作者
章隆兵
张福新
陈意云
-
机构
中国科技大学计算机系
中国科学院计算技术研究所
-
出处
《小型微型计算机系统》
CSCD
北大核心
2003年第3期340-343,共4页
-
基金
国家自然科学基金 (编号 60 0 73 0 18
698962 5 0 )资助
+2 种基金
中国科学院全国首届优秀博士学位论文作者专项基金资助
中科院计算所领域前沿青年基金(编号 2 0 0 162 80 -6)
高等学校学科点专顶科研基金(编号:980 3 5 82 8)资助
-
文摘
软件 DSM系统的并行调试环境已经成为制约其广泛应用的一个重要因素 .重放方法使得用户能用循环调试技术来调试具有执行不确定性的软件 DSM程序 .本文定义了软件 DSM程序执行的 happen- before- 1关系 ,并依据其提出一种在软件 DSM系统 JIAJIA上实现重放的方法 .实际应用测试表明 。
-
关键词
软件DSM系统
软件工程
软件测试
分布式共享存储系统
重放方法
数据竞争
日志文件
-
Keywords
distributed shared memory system
replay technique
data race
log file
-
分类号
TP311.5
[自动化与计算机技术—计算机软件与理论]
-