基于Elastic的分布式大数据联机分析处理体系

本文介绍了在电信运营商环境下,如何集中管理非结构化文本数据。提出一种轻便的架构,可以降低处理数据的时延,减少中心节点的成本。电信运营商中存在大量的日志数据,如用户的行为数据、话单数据、CDN访问日志、互联网电视的播放数据等等,这些数据存在数据量大、分析需求多样化的特征。本文基于开源软件,通过两年多的实践经验总结一种方法,在电信运营商中的日志场景下的快速搭建,快速构建查询报表,跨省跨节点快速度查询的技术实践。