期刊文献+

海量农业科学数据存储体系架构与方法研究 被引量:6

Research on storage architecture and method for big agricultural scientific data
下载PDF
导出
摘要 为了解决应用传统数据库架构存储和管理分散而海量的农业数据存储能力不足和管理困难的问题,在Hadoop框架下研究了面向海量农业数据的分布式计算与存储技术,提出了基于Hadoop的相邻区域边缘化存储和混合式索引分布与检索技术。测试和实验结果证明,应用这种技术所构建的分布式存储系统,能很好地实现对海量农业数据的存储和管理。 To solve the problem of insufficient storage capacity and hard to manage fordispersed and massive agriculturaldata in traditionaldatabase schema,the peper studied the technology ofdistributed computing and storage under the framework of Hadoop,and the method of adjacent marginalized storage based on Hadoop and the technology of hybrid indexdistribution and proposed retrieval.Test and practice results showed that the system established with this method,could provide a technicaldirection for efficient organization and management of massive agriculturaldata.
作者 王剑 黄朝光
出处 《广东农业科学》 CAS 2015年第2期152-156,共5页 Guangdong Agricultural Sciences
基金 中央级公益性科研院所基本科研业务费专项(2014-J-006) 国家高技术研究发展计划(863)项目(2013AA102405)
关键词 农业数据 分布式存储 分布式计算 HADOOP agriculturaldata distributed storage distributed computing Hadoop
  • 相关文献

参考文献9

二级参考文献67

  • 1吴广君,王树鹏,陈明,李超.海量结构化数据存储检索系统[J].计算机研究与发展,2012,49(S1):1-5. 被引量:30
  • 2http://hadoop, apache, org/.
  • 3The Hadoop Distributed File System: Architecture and Design . http://hadoop, apache, org/core/does/rO. 16.4/hdfs design, ht- ml.
  • 4Hadoop HBase Performance Evaluation Introduction . http://www, es. duke. edu/kcd/hadoop/kcd-hadoop-report, pdf.
  • 5Jeffrey Dean, sanjay Ghemawat. MapReduce: simplified data processing on large clusters[C].//6th Symposium on Operating Systems Design and Implementation. USA,2004 .
  • 6http ://www. hadoop, org, 2009- 5 - 15.
  • 7Wbite T. Hadoop: The Definitive Guide[M].[S. l.] : O’Reillly Media, Inc., 2009.
  • 8Chang E, Dean J, Ghemawat S. Bigtable: A Distributed Structured Data Storage System[C] //Proc. of OSDI’06. Seattle, USA:[s. n.] , 2006.
  • 9吴思宁,贺劲,熊劲等.DCFS机群文件系统服务器组的设计与实现[C].2002全国开放式分布与并行计算学术会(DPCS2002),2002.
  • 10巨鲸网[EB/OL].[2011-11-08].http://topl00.on/.

共引文献100

同被引文献76

引证文献6

二级引证文献11

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部