非结构化数据存储中面向访问任务的小文件合并策略
摘要
分析了非结构化数据储存方式下云存储层次结构,探讨了面向访问任务的小文件存储问题,提出了小文件合并的策略。
二级参考文献24
-
1Baker M G, Hartman J H, Kupfer M D, et al. Measurements of a distributed file system[C].ACM SIGOPS Operating Systems Review. ACM, 1991, 25(5): 198-212.
-
2Beaver D,Kumar S,Li H C,et al. Finding a needle in Haystack: Face- book's photo storage[EB/OL].OSDI,2010.
-
3PATASCALE DATA STORAGE INSTITUTE. NERSC file system statics [EB/ OLl.http:/ /pdsi.nersc.gov/filesystem.htm,2007-11-11.
-
4FELIX E. Environmental molecular sciences laboratory:static survey of file system statistics[EB/OL].http://www.pdsi-scidac.org/fsstats/index. html,2011-02-23.
-
5Borthakur D. The hadoop distributed file system: Architecture and design[l]. Hadoop Project Website, 2007, 11: 21.
-
6AMAZON.Amazon simple storage service [EB/OL].http://www. amazon.corn/s3,2011-03-01.
-
7Mackey G, Sehrish S, Wang J. Improving metadata management for small files in HDFS[C].Cluster Computing and Workshops, 2009. CLUSTER'09. IEEE International Conference on. IEEE, 2009,1-4.
-
8Liu X, Han J, Zhong Y, et al. Implementing WebGIS on Hadoop: A case study of improving small file I/O performance on HDFS[C].Cluster Computing and Workshops, 2009. CLUSTER'09. IEEE International Conference on. IEEE, 2009. 1-8.
-
9Bo Dong, Jie Qiu, Qinghua Zheng, et aL A Novel Approach to Improving the Efficiency of Storing and Accessing Small Files on Hadoop: a Case Study by PowerPoint Files [C],International Conference on Services Computing, 2010.65-72.
-
10Xu C, Huang X, Wu N, et al. Using memcached to promote read throughput in massive small-file storage system[C].Grid and Cooperative Computing (GCC), 2010 9th International Conference on. IEEE, 2010: 24-29.
共引文献26
-
1周国安,李强,陈新,胡旭.云环境下海量小文件存储技术研究综述[J].信息网络安全,2014(6):11-17. 被引量：16
-
2潘少明,赖新果,种衍文,李红.用户访问驱动的空间数据存储组织策略[J].武汉大学学报（信息科学版）,2019,44(2):296-301. 被引量：2
-
3杨洪章,张军伟,刘振军,张建刚.Readdir++:一种并行网络文件系统中海量小文件读优化技术[J].小型微型计算机系统,2014,35(11):2402-2409. 被引量：1
-
4周国安,李强,陈新,胡旭.海量小文件元数据的分布式存储与检索[J].空军预警学院学报,2014,28(6):427-431.
-
5李娜,杜彦辉,高峰.移动僵尸网络综述[J].信息网络安全,2015(4):19-27. 被引量：4
-
6陈若飞,姜文红.Hadoop作业调度本地性的研究与优化[J].软件,2015,36(2):64-68. 被引量：5
-
7周益周,王斌,谢小权.云环境下软件定义入侵检测系统设计[J].信息网络安全,2015(9):191-195. 被引量：5
-
8韩伟红,贾焰,郑毅.海量网络服务实时自动分类系统的研究与实现[J].信息网络安全,2015(9):236-239. 被引量：2
-
9张楠.云计算中使用容器技术的信息安全风险与对策[J].信息网络安全,2015(9):278-282. 被引量：10
-
10熊聪聪,吉苏杰,王兰婷.基于Hadoop的校园物联网数据处理系统研究[J].天津科技大学学报,2015,30(5):72-77. 被引量：3
-
1云端的非结构化数据存储[J].程序员,2011(6):124-124.
-
2王秋琳,宋立华,周钊.提高非结构化数据存储中小文件存储效率的策略研究[J].低碳世界,2015,0(29):245-246.
-
3员建厦.基于云存储技术的存储架构模型[J].计算机与网络,2013,39(7):64-67. 被引量：7
-
4王罡.上海交通大学 云存储简化数据管理[J].中国教育网络,2014(2):59-60.
-
5周雨浓.海量非结构化数据存储问题分析[J].电脑知识与技术,2016,0(2):34-36. 被引量：2
-
6史宏伟.数字存储：让我欢喜让我忧[J].中国摄影,2005(12):129-129.
-
7蔡盈芳.基于云计算的信息系统安全风险评估模型[J].中国管理信息化,2010,13(12):75-77. 被引量：28
-
8雷宁.如何使用电子相册模板[J].数字世界,2003(4):80-81.
-
9张睿.面向云存储的非结构化数据存储分析[J].电脑知识与技术,2016,0(1):52-54. 被引量：1
-
10曹四化,何鸿君,罗莉,冯涛.一种基于用户意愿的数据保护模型[J].武汉大学学报（理学版）,2006,52(5):574-577.
