期刊文献+

基于ELK数据采集与分析平台的设计与实现

下载PDF
导出
摘要 本文采用ELK(Elasticsearch Logstash Kibana)作为系统框架,并搭建Nginx服务,结合Filebeat等技术,实现对服务器产生的海量日志收集、查询、检索和可视化的构建日志数据采集与分析平台。平台分为四个模块:日志收集模块,日志存储模块,日志预处理模块以及日志检索和展示模块,系统能高效管理数量达到数百台服务器日志数据。
作者 李连天
出处 《电子技术与软件工程》 2021年第23期174-175,共2页 ELECTRONIC TECHNOLOGY & SOFTWARE ENGINEERING
  • 相关文献

参考文献4

二级参考文献20

  • 1包立辉,黄彦飞.高并发网站的架构研究及解决方案[J].计算机科学,2012,39(S2):184-187. 被引量:19
  • 2Chang F,Dean J,Ghemawat S,et al.Bigtable:A distributed storage system for structured data[C]//Seventh Symposium on Operating System Design and Implementation.Seattle,WA:UsenixAssociation,2006.
  • 3Scribe logfile aggregation system described by facebook's jeff hammerbacher[EB/OL].http://github.com/facebook/scibe,2008.
  • 4Jerome Boulon,Andy Konwinski,Runping Qi,et al.Chukwa:A large-scale monitoring system[C]//Cloud Computing and Its Applications,2008.
  • 5Dean J,Ghemawat S.MapReduce:Simplifie'r date processing on large clusters[J].Communications of the ACM,2008,51 (1):107-113.
  • 6Dean J,Ghemawat S.MapReduce:A flexible data processing tool[J].Communications of the ACM,2010,53 (1):72-77.
  • 7Liu Yan,Cao Ning,Pan Wei,et al.System anomaly detection in distributed systems through MapReduce-based log analysis[C]//Advaxed Computer Theory and Engineering,2010.
  • 8Ronald C Taylor.An overview of the Hadoop/MapReduce/HBase framework and its current applications in bioinformatics[C]//11th Annual Bioinformatics Open Source Conference,2010.
  • 9王珊,王会举,覃雄派,周烜.架构大数据:挑战、现状与展望[J].计算机学报,2011,34(10):1741-1752. 被引量:616
  • 10覃雄派,王会举,杜小勇,王珊.大数据分析——RDBMS与MapReduce的竞争与共生[J].软件学报,2012,23(1):32-45. 被引量:386

共引文献32

相关作者

内容加载中请稍等...

相关机构

内容加载中请稍等...

相关主题

内容加载中请稍等...

浏览历史

内容加载中请稍等...
;
使用帮助 返回顶部