期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
低能耗磁光混合归档系统的设计与实现 预览 被引量:1
1
作者 缪嘉嘉 付印金 +1 位作者 余沛毅 毛捍东 《计算机技术与发展》 2017年第8期52-56,共5页
层次型混合归档系统是数据存储领域的研究热点,在工业界也被广泛接受,小到个人存储大到数据中心都在使用混合存储系统。针对大数据中心的能耗问题,引入更为廉价低能耗的光介质存储,建立阵列、在线光盘库、离线光盘库构成的混合归档... 层次型混合归档系统是数据存储领域的研究热点,在工业界也被广泛接受,小到个人存储大到数据中心都在使用混合存储系统。针对大数据中心的能耗问题,引入更为廉价低能耗的光介质存储,建立阵列、在线光盘库、离线光盘库构成的混合归档系统,采用低能耗磁光混合的存储架构,在牺牲陈旧文件读取速度的情况下,大幅降低了存储能耗;在研究分析数据的一致性保证机制以及多级存储系统的弹性设计的基础上,针对光介质的读写特性,重点研究了磁光混合归档系统的文件缓存和预取机制。采用基于整体访问频率的数据迁移策略解决了热度文件的访问效率不受影响的问题,采用基于I/O特征预测模型的预取算法,提升了多级存储结构的命中准确度。实验结果表明,所构建的系统能够有效节省能源并可维持数据检索查询的时效性。 展开更多
关键词 低能耗 光盘库 磁光混合 多级存储系统 文件预取 文件缓存
在线阅读 下载PDF
KingCloud:智能对象归档系统
2
作者 缪嘉嘉 付印金 毛捍东 《计算机科学》 CSCD 北大核心 2016年第S2期575-577,596共4页
随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供... 随着信息化进程的不断推进,生产系统积累了大量的数据,形成了归档需求;与此同时,数据信息类型不断丰富,非结构化数据的处理是挖掘数据价值的关键。设计并实现了KingCloud智能对象归档系统,通过文档分类技术实现了文本文件的分类,并提供了文档逻辑视图;利用图像识别、视频关键帧提取等技术实现图片和视频文件的内容元数据获取,在整体存储结构上结合文件系统语义研究对文件预取、存储缓存、数据布局和策略感知等方面进行优化,能够对数据进行智能的分类、归纳总结、智能的发现和预测及智能的分析,有效提升了存储系统的服务能力、服务质量和服务性能。 展开更多
关键词 文件系统语义 归档系统 文档分类 数据布局 文件预取
在线阅读 免费下载
一种面向分布式文件系统的文件预取模型的设计与实现 被引量:1
3
作者 师明 刘轶 唐歌实 《计算机科学》 CSCD 北大核心 2014年第7期30-35,共6页
如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点.文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现.启发式文件预取对上层应用透... 如何为上层应用和计算提供稳定高效的文件I/O性能,是分布式文件系统性能研究的热点.文中分析分布式文件系统在设计机理上的共同特征,基于此提出一种通用型的启发式文件预取模型,并选取HDFS平台进行系统实现.启发式文件预取对上层应用透明,采用在文件系统内部建立预取线程池的方法,以组成文件块的数据存储文件为预取单位,在分布式文件系统内部实现.这种设计思路具有一定的普适性,适合推广应用于多种分布式文件系统.实验结果表明,所述的启发式文件预取,能够有效提升分布式文件系统的I/O性能. 展开更多
关键词 分布式文件系统 文件预取 启发式 HDFS
在线阅读 免费下载
多线程环境下基于多预取点的文件预取 预览 被引量:1
4
作者 刘金 胡创 +1 位作者 胡明 龚奕利 《计算机应用》 CSCD 北大核心 2012年第6期1713-1716,1720共5页
为解决当前Linux内核的预取算法在多线程情况下出现预取误判的问题,依据多线程环境下进程对磁盘文件的访问特点,提出一种基于多预取点的预取算法。在Linux内核原有的预取算法的基础上,结合多线程环境下应用程序对数据的访问模式,在Linu... 为解决当前Linux内核的预取算法在多线程情况下出现预取误判的问题,依据多线程环境下进程对磁盘文件的访问特点,提出一种基于多预取点的预取算法。在Linux内核原有的预取算法的基础上,结合多线程环境下应用程序对数据的访问模式,在Linux内核的页面缓存层进行了实现。实验和分析表明,在IOzone单线程测试中,该算法和Linux内核原预取算法性能相当;在多线程测试中,读取相同大小的文件,耗时比Linux内核原预取算法至少少1/3。新算法对于提高I/O并行度,从而提高整个计算机系统并行化很有帮助。 展开更多
关键词 多线程 文件预取 多预取点 LINUX内核
在线阅读 下载PDF
一种识别I/O Feature的文件预测模型
5
作者 杨晓芬 师明 +2 位作者 李博 胡海燕 刘轶 《小型微型计算机系统》 CSCD 北大核心 2012年第11期2493-2497,共5页
在文件预取技术中,如何提高文件预取的命中率和适用度一直是研究的焦点.尤其是在面对大批量数据读取的时候,如何提高预取命中率对系统的性能提升有着至关重要的影响.本文提出识别I/O Feature的预测模型(IOPM),该模型通过记录文件的历... 在文件预取技术中,如何提高文件预取的命中率和适用度一直是研究的焦点.尤其是在面对大批量数据读取的时候,如何提高预取命中率对系统的性能提升有着至关重要的影响.本文提出识别I/O Feature的预测模型(IOPM),该模型通过记录文件的历史访问信息获取I/O Features,然后分析这些I/O访问模式,设计一个简单高效的特征符号表来表示这些模式.此预测模型可以有效地识别出顺序读、固定点读、逆序读、跳读、多步跳读等多种模式.同时,该模型添加应用程序的信息,可以有效地对不同程序之间的交叉读做出预测,具有很高的预测命中率. 展开更多
关键词 文件预取 命中率 预测模型 I O FEATURE
网格虚拟组织副本协作预取机制 预览 被引量:3
6
作者 田田 罗军舟 +1 位作者 宋爱波 伍之昂 《软件学报》 EI CSCD 北大核心 2011年第10期 2372-2384,共13页
副本复制是教据网格中提高数据访问效率的有效方法,如何提高副本复制的效率是一个关键性问题.现有的复制策略大多基于文件访问历史选择高价值副本进行复制,但其针对的都是节点已经访问过的文件.通过对虚拟组织文件访问特性进行深入... 副本复制是教据网格中提高数据访问效率的有效方法,如何提高副本复制的效率是一个关键性问题.现有的复制策略大多基于文件访问历史选择高价值副本进行复制,但其针对的都是节点已经访问过的文件.通过对虚拟组织文件访问特性进行深入分析,引入隐性高价值文件概念,提出虚拟组织副本协作预取机制(cooperativereplicaprefetchingmechanism,简称CoRPM),使得本地节点通过与虚拟组织中其他节点进行协作来获取隐性高价值丈件副本.该机制首先给出了副本协作预取架构,各个虚拟组织节点上的文件预取模块以协作的方式为虚拟组织内节点提供丈件预取服务;然后,在副本协作预取架构的基础上设计了副本协作预取流程,其核·22算法包括以作业类型为中心的本地文件预取算法和预取文件选择算法.模拟实验结果表明,CoRPM与已有的基于文件访问历史的副本复制篆略相结合,可以更加有效地降低数据访问延迟. 展开更多
关键词 数据网格 副本复制 虚拟组织 文件预取 协作
在线阅读 下载PDF
一种支持并发访问流的文件预取算法 预览 被引量:9
7
作者 吴峰光 奚宏生 徐陈锋 《软件学报》 EI 北大核心 2010年第8期 1820-1833,共14页
设计并实现了一种按需预取算法,采用更为宽松的顺序性判决条件,并以页面和页面缓存的状态作为可靠的决策依据.它可以发现淹没在随机读中的顺序访问并进行有效的预读,支持对单个文件实例的并发访问而产生的交织访问模式.实验结果表... 设计并实现了一种按需预取算法,采用更为宽松的顺序性判决条件,并以页面和页面缓存的状态作为可靠的决策依据.它可以发现淹没在随机读中的顺序访问并进行有效的预读,支持对单个文件实例的并发访问而产生的交织访问模式.实验结果表明:相对于原Linux预读算法,该算法在随机干扰下的顺序读性能可提高29%;交织读的性能是传统算法的4-27倍;同时,应用程序可见延迟改善可达35倍.该算法已被Linux2.6.24内核采用. 展开更多
关键词 LINUX 操作系统 I/O性能 文件预取 并发I/O 访问模式
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部 意见反馈