-
题名基于MongoDB集群的遥感数据存储方法研究
被引量:1
- 1
-
-
作者
李宏志
李苋兰
-
机构
滁州学院信息学院
福建师范大学光电与信息工程学院
-
出处
《山东师范大学学报(自然科学版)》
CAS
2018年第3期293-301,共9页
-
基金
安徽省自然科学基金资助面上项目(1408085MF126)
-
文摘
应用MongoDB非关系型数据库,提出了一种基于MongoDB数据库集群的遥感数据的储存方法,提出了影像文件与元数据分离存储的策略;并对MongoDB集群数据分片的片键机制进行了深入研究.根据遥感数据的特点提出了基于"升序键+搜索键"数据分片方案,通过应用哈希一致性算法改善集群间数据分布均匀性,通过分布式的高速内存缓存提高遥感数据的检索效率,并实现了基于此方法的架构模型.最后针对文中存储方法提出了测试方案并进行了对比测试实验,实验结果表明该存储方法能够较好地提高遥感数据存储和检索的性能,适用于遥感领域的数据存储.
-
关键词
遥感数据
MongoDB集群
片键策略
哈希一致性
存储模型
-
Keywords
remote sensing data
MongoDB cluster
shard key strategy
Hash consistency
storagemodel
-
分类号
TP319
[自动化与计算机技术—计算机软件与理论]
-
-
题名基于MongoDB集群的遥感数据存储方法的研究
- 2
-
-
作者
李宏志
李苋兰
-
机构
滁州学院信息学院
福建师范大学光电与信息工程学院
-
出处
《四川理工学院学报(自然科学版)》
CAS
2018年第2期89-95,共7页
-
基金
安徽省自然科学基金面上项目(1408085MF126)
-
文摘
随着遥感探测技术的发展,遥感数据的数量和质量都在逐步提高,如何有效地存储和管理这些数据成为当前研究的重点。应用MongoDB非关系型数据库,提出了一种基于MongoDB数据库集群的遥感数据的储存方法,设计了影像文件与元数据分离存储的策略;并对MongoDB集群数据分片的片键机制进行了深入研究,根据遥感数据的特点提出了基于"升序键+搜索键"数据分片方案,通过应用哈希一致性算法改善集群间数据分布均匀性,通过分布式的内存缓存提高遥感数据的检索效率,并实现了基于此方法的架构模型。最后针对所提出的存储方法设计了测试方案并进行了对比测试实验,实验结果表明该存储方法能够较好地提高遥感数据存储和检索的性能,适用于遥感领域的数据存储。
-
关键词
遥感数据
MongoDB集群
片键策略
哈希一致性
存储模型
-
Keywords
remote sensing data
MongoDB cluster
shard key strategy
Hash consistency
storage model
-
分类号
TP319
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种MongoDB集群数据布局优化方法研究
被引量:7
- 3
-
-
作者
冯东煜
朱立谷
肖子达
刘迪
-
机构
中国传媒大学计算机学院
安防大数据处理与应用北京市重点实验室
-
出处
《计算机工程与应用》
CSCD
北大核心
2017年第17期77-84,共8页
-
基金
国家自然科学基金(No.6137006)
-
文摘
传统关系型数据库在处理大规模数据应用时暴露出许多难以克服的问题,No SQL以独有的特点在大数据背景下得到广泛应用。选择快递业寄递大数据应用为背景,研究Mongo DB分片集群的数据布局优化方法。介绍基于Mongo DB分片集群的快递寄递数据离线分析系统。根据快递运单字段特点研究Mongo DB片键策略,提出基于分片标签的连续均匀数据条带化数据布局方法。对提出的数据布局方法进行测试,结果表明采用该方法的Mongo DB集群数据均匀分布和统计分析性能均达到较高水平,并且通过扩展集群分片数目可以进一步提升系统性能。
-
关键词
寄递数据
MONGODB
片键策略
分组聚合
-
Keywords
posting and delivering data
MongoDB
shard-key strategy
grouping and aggregation
-
分类号
TP316
[自动化与计算机技术—计算机软件与理论]
-