-
题名一种加速广域文件系统读写访问的缓存策略
被引量:1
- 1
-
-
作者
马留英
蔡杰明
刘浏
刘振军
-
机构
中国科学院计算技术研究所
中国科学院大学
-
出处
《计算机研究与发展》
EI
CSCD
北大核心
2014年第S1期38-47,共10页
-
基金
国家"八六三"高技术研究发展计划基金项目(2011AA01A102
2013AA013205)
+2 种基金
国家"九七三"重点基础研究发展计划基金项目(2011CB302304)
中国科学院先导专项基金项目(XDA06010401)
中国科学院重点部署基金项目(KGZD-EW-103-5(7))
-
文摘
针对广域网高延迟、低带宽的特性给广域文件系统访问带来的性能影响问题,提出了一种不依赖于底层文件系统、能够加速广域文件系统读写访问的缓存策略.该策略支持基于区间粒度的文件数据缓存及访问,并支持元数据本地缓存;该策略提供基于阈值的容量管理功能,采用超时与最终一致相结合的方式维护缓存的一致性.最后使用典型的文件I/O基准测试工具和元数据性能测试工具对该缓存策略进行了评测,实验结果表明:该缓存策略减少了客户端与服务器的交互次数,给广域文件系统的数据访问带来了明显的性能提升,当缓存命中时其数据的读写性能与本地文件系统相近.
-
关键词
广域网
缓存
文件系统
一致性
FUSE
-
Keywords
WAN
cache
file systems
consistency
Fuse
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
-
-
题名高性能混合结构的瓦记录磁盘系统的设计与实现
- 2
-
-
作者
马留英
肖文健
董欢庆
许鲁
-
机构
中国科学院计算技术研究所
中国科学院大学
-
出处
《高技术通讯》
北大核心
2017年第2期140-149,共10页
-
基金
863计划(2013AA013205)
中国科学院先导专项基金(XDA06010401)
中国科学院重点部署基金(KGZD-EW-103-5(7))资助项目
-
文摘
对新的磁记录技术——瓦记录(SMR)进行了性能分析,针对SMR叠瓦式的磁道布局方式严重限制了其随机写性能,希捷公司的瓦记录磁盘(SSWD)在磁盘内部使用持久缓存虽能解决SMR叠瓦特性导致随机写访问受限,但其在持续随机写入的情景下性能表现很差的问题,设计了一种结合固态硬盘(SSD)的混合瓦记录磁盘(HSWD)结构;使用SSD作为持久缓存,实现了全相联和组相联两种持久缓存到本地存储的映射策略,以及三种持久缓存回收策略——LRU、FIFO和MOST,并通过试验和理论分析分别对比了两种映射策略和三种回收策略。最后,通过测试对比HSWD、SSWD和Flashcache的性能,结果表明,HSWD较SSWD和Flashcache在持续随机写性能上有了明显提升,例如在回放hm0的测试中,HSWD的性能较SSWD提升2.25倍,较Flashcache提升1.32倍。
-
关键词
瓦记录(SMR)
瓦记录磁盘(SSWD)
固态硬盘(SSD)
混合系统
缓存策略
回收策略
-
Keywords
shingled magnetic recording (SMR), seagate shingled write disk (SSWD), solid state drive(SSD), hybrid system, caching policy, collection policy
-
分类号
TP333
[自动化与计算机技术—计算机系统结构]
-
-
题名希捷瓦记录磁盘评测
- 3
-
-
作者
张强
刘振军
董欢庆
马留英
李猛坤
-
机构
中国科学院计算技术研究所
中国科学院大学
首都师范大学管理学院
-
出处
《高技术通讯》
北大核心
2017年第5期416-425,共10页
-
基金
中国科学院战略性先导科技专项(XDA06010401)
中国科学院重点部署项目(KGZD-EW-103-5(7))
北京市教育委员会科技计划(km201510028019)资助项目
-
文摘
分析了可提升磁盘存储密度的瓦记录(SMR)技术的优势及局限性,指出SMR采用部分叠加相邻磁道的方式增大磁盘的面密度,但是这也带来了写覆盖(Write Overlay)问题,即更新某一磁道上的数据时会覆盖相邻磁道上的有效数据,导致瓦记录磁盘(SWD)无法支持原地更新,使其非顺序写性能受到影响。为了促进该技术的应用,通过Fio和Filebench测试工具,对SMR技术的代表性产品——希捷瓦记录磁盘(SSWD)做了比较全面的测试,并对多种应用场景下SSWD的性能做了详细的测试和分析,以便为SSWD在数据中心的应用提供重要的参考。
-
关键词
瓦记录(SMR)
瓦记录磁盘
写覆盖
原地更新
-
Keywords
Key words: shingled magnetic recording (SMR), shingled write disk (SWD), write overlay, in-place up-date
-
分类号
TP333.3
[自动化与计算机技术—计算机系统结构]
-
-
题名GeoFS:一个广域文件系统的设计与实现
- 4
-
-
作者
刘国良
马留英
闫鹏飞
张帅
刘浏
-
机构
中国科学院计算技术研究所
中国科学院大学
-
出处
《计算机研究与发展》
EI
CSCD
北大核心
2014年第S1期7-17,共11页
-
基金
国家"九七三"重点基础研究发展计划基金项目(2011CB302304)
国家"八六三"高技术研究发展计划基金项目(2011AA01A102
+2 种基金
2013AA013205)
中国科学院先导专项基金项目(XDA06010401)
中国科学院重点部署基金项目(KGZD-EW-103-5(7))
-
文摘
GeoFS是一个遵从POSIX标准的广域分布式文件系统,用于站点之间共享数据.GeoFS使用FUSE用户态文件系统库,为应用程序提供标准文件系统接口,现有应用无需修改源代码即可运行其上.详述GeoFS副本及缓存设计,使得GeoFS适用于高时延、低带宽的广域环境的同时,提高GeoFS的可靠性与可用性.性能测试表明GeoFS在不同时延下,并行两副本读比单副本读性能平均提高56%,其中在100ms时延下,并行两副本读比单副本读性能提高66%;而当客户端缓存命中时,读写性能与本地文件系统性能相当.
-
关键词
文件系统
广域存储
缓存
复制
-
Keywords
file system
wide-area storage
caching
replication
-
分类号
TP316.4
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于广域存储系统的副本技术研究
- 5
-
-
作者
闫鹏飞
吴雪丽
蔡杰明
马留英
刘振军
-
机构
中国科学院计算技术研究所
中国科学院大学
中软信息系统工程有限公司
-
出处
《网络新媒体技术》
2015年第3期19-27,64,共10页
-
基金
国家"八六三"高技术研究发展计划基金项目(编号:2011AA01A102
2013AA013205)
+2 种基金
国家"九七三"重点基础研究发展计划基金项目(编号:2011CB302304)
中国科学院先导专项基金项目(编号:XDA06010401)
中国科学院重点部署基金项目(编号:KGZD-EW-103-5(7))
-
文摘
针对广域网高延迟、低带宽的特性给广域文件系统访问带来的性能影响问题,提出了一种不依赖于底层文件系统、能够加速广域文件系统读写访问的缓存策略。该策略支持基于区间粒度的文件数据缓存及访问,并支持元数据本地缓存;并提供基于阈值的容量管理功能,采用超时与最终一致相结合的方式维护缓存的一致性。最后使用典型的文件I/O基准测试工具和元数据性能测试工具对该缓存策略进行了评测,实验结果表明:该缓存策略减少了客户端与服务器的交互次数,给广域文件系统的数据访问带来了明显的性能提升,当缓存命中时其数据的读写性能与本地文件系统相近。
-
关键词
广域网
文件系统
数据中心
副本
并行TCP
-
Keywords
WAN, file systems, datacenter, replication, parallel TCP
-
分类号
TP333
[自动化与计算机技术—计算机系统结构]
TP393.2
[自动化与计算机技术—计算机应用技术]
-