摘要
为保证分布式数据处理分析与存储的稳定性,构建面向网络数据挖掘、处理分析的系统管理平台,针对不同的网络数据信息处理业务,运用Apriori改进算法、MapReduce批量数据计算方案,对清洗、过滤后的数据进行标准化关联处理分析,并将数据处理结果存储在业务数据库中。实验结果表明,置信度为50%的关联规则可用性较低。
In order to ensure the stability of distributed data processing,analysis and storage,a system management platform oriented to network data mining,processing and analysis is built.For different network data information processing businesses,Apriori improved algorithm and MapReduce batch data calculation scheme are used to conduct standardized association processing and analysis on the cleaned and filtered data,and the data processing results are stored in the business database.The experimental results show that the availability of association rules with a confidence level of 50%is low.
作者
许文芝
XU Wenzhi(Wuxi City College of Vocational Technology,Wuxi Jiangsu 214000,China)
出处
《信息与电脑》
2022年第22期106-108,共3页
Information & Computer
基金
江苏省教育科学研究院现代教育技术研究所2017年度重点课题“信息传播视角下高校慕课(MOOCs)的建设与共享机制研究”(项目编号:2017-R-55067)
2020年江苏高等教育学会“大学素质教育与数字化课程建设”专项课题“计算机类在线实践金课的建设与应用研究”
2021年江苏高校“教学研究工作”专项课题“智慧教育背景下学前教育专业混合式教学模式的探究与实践——以‘学前卫生学’教学为例”(项目编号:2021JSJY096)
无锡市教育科学“十四五”规划信息技术研究专项课题“指向问题解决的信息科技项目设计与实践研究”(项目编号:XXZX/2021/11)。
关键词
大数据
数据处理与分析
改进算法
big data
data processing and analysis
improved algorithm
