期刊文献+

基于一种文件缓冲方式操作大数据量数据研究 被引量:1

下载PDF
导出
摘要 众所周知,在大数据量环境下,数据库服务器的资源是昂贵的,混合核心数据和过程数据的后果就是资源被不重要的数据占用,导致整个系统性能缓慢、堵塞和资源的浪费。基于此,文中针对大数据本身特点和在实际应用过程中大数据量数据的管理和处理方面的问题,对大数据特点和管理方面进行了有效阐述和分析,同时针对大数据处理方面存在的问题,提出了采用文件按缓冲的方式对大数据量数据进行合理的处理方式,而达到提高大数据利用率的要求。
作者 郑士芹
出处 《电子制作》 2021年第4期59-60,43,共3页 Practical Electronics
  • 相关文献

参考文献3

二级参考文献23

  • 1颜维龙,盖杰,武港山,袁春风.面向网络的全文检索中索引文件的组织[J].计算机应用研究,2002,19(11):124-126. 被引量:12
  • 2李建中.并行数据库的查询处理并行化技术和物理设计方法[J].软件学报,1994,5(10):1-10. 被引量:32
  • 3朱恒民,王宁生.一种改进的相似重复记录检测方法[J].控制与决策,2006,21(7):805-808. 被引量:12
  • 4陈丹,郑增威.增量式索引技术在信息搜索引擎中的应用[J].现代图书情报技术,2007(6):87-90. 被引量:2
  • 5Anestis Sitas, Sarantos Kapidakis. Duplicate detection algo rithms of bibliographic descriptions[J]. Library Hi Tech,2008, 26(2) :287--301.
  • 6[美]ThomasKyte.Oracle高效设计[M].钟鸣泽.北京:机械工业出版社,2006.
  • 7Douglas, Laney. 3D Data Management: ControllingData Volume, Velocity and Variety. Gartner. Retrieved 6February 2001.
  • 8Lith, Adam, Mattsson,Jakob. Investigating storagesolutions for large data - A comparison of well performingand scalable data storage solutions for real time extractionand batch insertion of data. 2010.
  • 9Yongqiang He, Rubao Lee, Yin Huai, Zheng Shao, NamitJain, Xiaodong Zhang, Zhiwei Xu. RCFile: A fast andspace-efficient data placement structure in MapReduce-based warehouse systems. ICDE 2011: 1199-1208.
  • 10Dittrich J,Quiane-Ruiz JA,Jindal A, Kargin Y, Setty V,Schad J. Hadoop-H-: Making a yellow elephant run like acheetah (without it even noticing)‘ PVLDB,2010,3(1—2):518-529.

共引文献296

同被引文献13

引证文献1

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部