一种Hadoop中4G大数据存储方法研究

针对4G/3G时代可变字段的日志型数据的特征,研究了通过hadoop框架下的HIVE数据仓库进行存储和处理的性能优化方法。本文通过分析HIVE的特点,结合数据结构本身固有的特性,提出了针对4G/3G可变字段日志型数据的优化建议和实施方法。并通过实验验证了该方法的高效性。