基于Hadoop的电商离线数据挖掘系统设计

随着数据爆炸式增长,大数据技术得到广泛应用。Hadoop平台大数据处理技术得到长足发展,Hadoop为不同场景功能需求提供丰富的工具,电商行业积累的数据不断增多,如何处理好存储订单与仓库数据成为电商行业的重要问题。文章介绍了Hadoop平台与数据挖掘相关技术,提出电商离线数据挖掘处理系统方案。设计数据处理平台系统架构,完成电商公司订单数据的数据仓库(Extract Transform Load,ETL)和入库。