期刊文献+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息

海量数据管理平台MDMP中并行加载与查询技术研究 被引量：1

Parallel Data Loading and Query Techniques in Massive Data Management Platform
下载PDF
导出
摘要 海量数据的产生对传统的数据库技术在数据存储、实时数据加载、实时数据查询等方面都提出了新的挑战.海量数据管理平台MDMP就是针对海量数据的存储及管理需求而研制的. MDMP中基于流水的多路并行加载技术提供了高性能的加载,并实现了在加载的同时进行实时查询;基于语义缓存的并行查询技术对于MDMP中频繁的聚集查询进行了优化,提高了查询速度.主要研究了这两个关键技术.
作者 张丽 杨树强 李爱平 贾焰 邹鹏
机构地区 国防科学技术大学计算机学院
出处 《计算机研究与发展》 EI CSCD 北大核心 2007年第z3期475-480,共6页 Journal of Computer Research and Development
基金 国家"八六三"高技术研究发展计划基金项目(2006AA01Z451,2006AA10Z237)
关键词 海量数据管理平台 并行加载 并行查询
分类号 TP311 [自动化与计算机技术—计算机软件与理论]
  • 相关文献

参考文献6

  • 1[1]Winter Corporation.2005 Winter Top Ten Award Winners.http://www.wintercorp.com/VLDB/2005_TopTen_Survey/Top-TenWinners_2005.asp,2005
  • 2[2]Y Dora Cai,Ruth Aydt,Robert J Brunner.Optimized data loading for a multi-terabyte sky survey repository.SC'05,Seattle,Washington,2005
  • 3[3]A Szalay,J Gray,A Thakar,et al.The SDSS Sky Server:Public access to the Sloan digital sky server data.Microsoft,Tech Rep:MSR-TR-2001-104,2001
  • 4曾嵘,杨树强,贾焰,张文.基于CORBA的中间件管理系统的设计与实现[J].计算机应用研究,2005,22(2):118-120. 被引量：1
  • 5[5]Qun Ren.Semantic caching and query processing.IEEE Trans on Knowledge and Data Engineering,2003,15(1):192-210
  • 6孟清,杨树强,蔡建宇,贾焰.面向海量数据统计分析查询的中间层语义缓存[J].计算机工程,2005,31(20):67-69. 被引量：11

二级参考文献10

  • 1Michi Henning Steve Vinoski.基于C++CORBA高级编程[M].北京:清华大学出版社,2000..
  • 2.StarBus 3.0程序员指南手册[M／CD].长沙:国防科学技术大学计算机学院613教研室[M].,2002.10—16..
  • 3黄杰 陈琳 钱芳.面向OLTP应用的服务对象管理系统.计算机科学,2000,10.
  • 4Scott Stanfield Ralph Arvesen.Visual C++开发人员指南[M].北京:机械工业出版社,2001..
  • 5曾春平.XML从入门到精通[M].北京:北京希望电子出版社,2002.97-107.
  • 6G Coulouris, J Dollimore, T Kindberg. Distributed Systems:Concepts and Design[ M ]. England: Pearson Education Limited, 2001.
  • 7Dar S, Franklin M J, Jonsson B T.Semantic Data Caching and Replacement.In: Proceedings of the 22nd VLDB Conference [C].Mumbai (Bombay), India,1996:330-341
  • 8Oracle Corporation.Oracle9i Application Server Database Cache [R].2000-10
  • 9Luo Qiong, Krishnamurthy S, Mohan C.Middle-tier Database Caching for E-business [C].SIGMOD Conference, 2002
  • 10袁志坚，杨树强，贾焰．基于CORBA的并行海量查询中间件的设计及实现[C]／／第20届全国数据库学术会议论文集．长沙：国防科学技术大学，2003．

共引文献10

同被引文献15

  • 1闫莺,金澈清,曹锋,汪恒杰,周傲英.多数据流上共享窗口连接查询的降载策略[J].计算机研究与发展,2004,41(10):1836-1841. 被引量：4
  • 2Ahmad M, Aboulnaga A, Babu S. Query interac- tions in database workloads[C] // Processings of the Workshop on Testing Database Systems, Provi- dence, Rhode Island, USA, 2009.
  • 3Chi Y~ Moon H J, Hacigumus H. iCBS: incremen- tal cost based scheduling under pieeewise linear slas [J] Proceedings of the VLDB Endowment, 2011, 4 (9) :563-574.
  • 4Bianca Schroeder, Mor Harchol-Baher, Arun Iyen- gar, et al. How to determine a good multi-program- ming level for external scheduling[C] // Proceedings of ICDE, 2006.
  • 5Ahmad M, Aboulnaga A, Babu S, et al. Modeling and exploiting query interactions in database systems [C]//Proceedings of CIKM, 2008 : 183-192.
  • 6Ahmad M, Duan S, Aboulnaga A, et al. Interaction -aware prediction of business intelligence workload completion times[C] // Proceedings of ICDE, 2010 : 413-416.
  • 7Tozer S, Brecht T, Aboulnaga A. Q-cop: avoiding bad query mixes to minimize client timeouts under heavy loads[C] // Proceedings of ICDE, 2010 : 397- 408.
  • 8Duggan J, Cetintemel U, Papaemmanouil O, et al.Performance prediction for concurrent database workloads[C] // In SIGMOD Conference, 2011.. 337-348.
  • 9张延松,张宇,黄伟,等.分布式聚集函数支持的内存O1AP并行查询处理技术[J].软件学报,2009,20(suppl.):165-175.
  • 10TPC-H benchmark specification[DB/OL], http..// www. tpc. org/tpch.

引证文献1

二级引证文献1

计算机研究与发展
2007年 第z3期

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部