-
题名基于Fork/Join的事务日志伴随模式挖掘方法
- 1
-
-
作者
孔明
魏东
冉义兵
毕国鹏
-
机构
北京建筑大学电气与信息工程学院
北京市科学技术委员会建筑大数据智能处理方法研究北京市重点实验室
北京声讯电子股份有限公司
-
出处
《小型微型计算机系统》
CSCD
北大核心
2023年第2期239-247,共9页
-
基金
国家自然科学基金项目(61871020)资助
北京市属高校高水平创新团队建设计划项目(IDHT20190506)资助
北京市教委科技计划重点项目(KZ201810016019)资助.
-
文摘
信息系统产生的大量事务日志数据蕴含着潜在的伴随模式,伴随模式是指在时空上频繁共现的一组对象.由于传统的滑动窗口算法和FP-Growth算法只能调用单一线程进行计算,随着数据规模的扩张,会导致挖掘伴随模式的时间急剧增加.为此本文提出了一种基于Fork/Join并行技术的伴随模式挖掘框架,其能够实现从单线程到多线程的迁移,充分利用多核配置的加速性能.该框架由划定伴随数据集、频繁项集挖掘和关联规则挖掘三部分组成.首先,提出了基于Fork/Join的多核并行滑动窗口算法,以缩短从事务日志中划定伴随数据集的时间;然后,提出基于Fork/Join的多核并行FP-Growth算法,以并行地挖掘伴随数据集中的频繁项集;最后,引入支持度、置信度和提升度3个参数,对伴随模式中各对象间的关联规则进行挖掘.基于门禁刷卡数据的实验结果表明,相比传统算法,本文所提出的框架能够挖掘出更多的伴随模式,同时挖掘效率较高.
-
关键词
事务日志
伴随模式
Fork/Join框架
滑动窗口
FP-GROWTH算法
-
Keywords
transaction logs
co-occurrence patterns
Fork/Join framework
sliding window
FP-Growth
-
分类号
TP18
[自动化与计算机技术—控制理论与控制工程]
-