期刊导航
期刊开放获取
河南省图书馆
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
553
篇文章
<
1
2
…
28
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
基于区块链的堡垒机日志分析系统设计与实现
1
作者
代雅琳
张爱清
+1 位作者
余斌
周桐
《计算机与数字工程》
2024年第8期2294-2299,2354,共7页
现有的堡垒机运维和审计过程中存在操作日志被篡改、管理员权利过大、中心化身份认证和资源不受控制等问题,论文设计并实现一套基于区块链的堡垒机日志分析系统,利用智能合约和星际文件系统,将堡垒机的管理、运维、审计等操作日志数据...
现有的堡垒机运维和审计过程中存在操作日志被篡改、管理员权利过大、中心化身份认证和资源不受控制等问题,论文设计并实现一套基于区块链的堡垒机日志分析系统,利用智能合约和星际文件系统,将堡垒机的管理、运维、审计等操作日志数据锚定在区块链上,形成可追溯、不可篡改的记录。结合智能合约、数据上链存证等技术,为用户提供运维审计流程的完整信息记录,也为个体公司或者司法机构提供数据无失真的证据保留和追责方法。系统实现及分析结果表明,该系统为现有不同类型的堡垒机系统提供辅助应用,具有不可篡改、可信度高、可溯源等特点,为堡垒机的管理和运维提供了新的思路和技术支持。
展开更多
关键词
区块链
堡垒机
智能合约
星际文件系统
日志分析
下载PDF
职称材料
CarbonData在网络安全日志分析场景下的性能评估
2
作者
黄必栋
《科学技术创新》
2024年第5期99-105,共7页
本文针对企业网络安全日志分析场景,采用实际网络安全日志数据,设计建表和测试方法,使用大数据引擎Spark SQL和Presto对索引行列混合式数据格式CarbonData进行了性能评估。通过测试得出,基于Spark SQL+CarbonData方案的数据查询和统计...
本文针对企业网络安全日志分析场景,采用实际网络安全日志数据,设计建表和测试方法,使用大数据引擎Spark SQL和Presto对索引行列混合式数据格式CarbonData进行了性能评估。通过测试得出,基于Spark SQL+CarbonData方案的数据查询和统计效率较高,能满足多种数据处理和分析要求,适用于网络安全日志分析应用。本文为企业网络安全日志分析方案的技术选型和设计提供参考。
展开更多
关键词
CarbonData
Spark
SQL
性能评估
安全
日志分析
下载PDF
职称材料
河北高速公路日志分析系统
3
作者
赵建新
《中国交通信息化》
2024年第5期77-82,共6页
随着高速公路收费稽核、跨省交易对账和运行监测等收费业务的发展,对收费软件日志进行集中存储并分析的需求不断增加。为了满足这一需求,本文对收费软件日志存储及使用现状进行了分析,提出构建日志管理分析系统。该系统通过在省中心建立...
随着高速公路收费稽核、跨省交易对账和运行监测等收费业务的发展,对收费软件日志进行集中存储并分析的需求不断增加。为了满足这一需求,本文对收费软件日志存储及使用现状进行了分析,提出构建日志管理分析系统。该系统通过在省中心建立Elasticsearch集群,对原始日志文件进行集中存储,并由日志分析服务对集中存储的日志进行分析处理,以实现收费软件的日志采集、存储、分析和结果的可视化展示,从而提升业务人员的工作效率。
展开更多
关键词
高速公路
收费软件
车道
日志
日志分析
下载PDF
职称材料
基于大数据的交易日志分析系统的设计和实现
4
作者
林滔
《软件》
2024年第5期58-60,共3页
为更好地构建统一管理的数据仓库,对交易日志分析范围内的所有相关应用软件提供统一的数据服务,本文应用大数据技术,完成对交易日志分析系统的设计和实现,并在SimuWorks平台下使用25个交易平台近1年的真实日志数据进行数据模拟,研究交...
为更好地构建统一管理的数据仓库,对交易日志分析范围内的所有相关应用软件提供统一的数据服务,本文应用大数据技术,完成对交易日志分析系统的设计和实现,并在SimuWorks平台下使用25个交易平台近1年的真实日志数据进行数据模拟,研究交易日志分析数据的准确率。结果表明,数据交易日志分析系统下的新方案可节约超过85%的数据仓库硬件设施,提升约82.7%的日志分析数据的准确率。因此,基于数据的交易日志分析系统具有较强的使用价值,日志分析数据读写响应时间也得到了显著提升。
展开更多
关键词
大数据
数据仓库
数据模拟
交易
日志分析
硬件设施
下载PDF
职称材料
基于ChatGLM的应用程序日志分析系统
5
作者
张世程
周梦广
《计算机应用文摘》
2024年第11期104-105,109,共3页
在以大语言模型为代表的人工智能技术高速发展下,自然语言处理技术发展日新月异,被广泛应用于生产生活。然而,应用程序日志随着数据量的提升变得越发复杂,难以实现高效地分析与处理。对此,文章提出了一种基于大语言模型ChatGLM的分析处...
在以大语言模型为代表的人工智能技术高速发展下,自然语言处理技术发展日新月异,被广泛应用于生产生活。然而,应用程序日志随着数据量的提升变得越发复杂,难以实现高效地分析与处理。对此,文章提出了一种基于大语言模型ChatGLM的分析处理方法,同时设计了一个日志分析系统。该系统借助ChatGLM具有的高效文本建模能力,采用微服务架构设计及容器部署,达到了高效、省时、省力的目标,为大规模日志分析提供了一种有益的思路。
展开更多
关键词
人工智能
大语言模型
日志分析
微服务
容器
下载PDF
职称材料
基于ELK的内容分发网络日志分析平台设计
被引量:
1
6
作者
林黄智
田柳
范之国
《安庆师范大学学报(自然科学版)》
2023年第1期79-84,共6页
随着内容分发网络系统承载着越来越多的大流量视频业务,其规模不断增大且对用户日志收集和集中处理的需求也越来越高,为提升日志处理效率,本文设计了一种基于实时日志搜索和分析系统(ELK)的日志分析平台,可通过对海量的用户访问日志进...
随着内容分发网络系统承载着越来越多的大流量视频业务,其规模不断增大且对用户日志收集和集中处理的需求也越来越高,为提升日志处理效率,本文设计了一种基于实时日志搜索和分析系统(ELK)的日志分析平台,可通过对海量的用户访问日志进行实时采集和检索,并捕获用户异常访问记录,从而实现了对系统性能和业务质量的可视化自动监控及提前预警,并提高了内容分发网络系统智能化运维效率。
展开更多
关键词
内容分发网络
实时
日志
搜索和
分析
系统
系统监控
日志分析
下载PDF
职称材料
基于大数据分析技术的计算机网络日志分析系统设计
被引量:
2
7
作者
宋立萍
《信息记录材料》
2023年第6期215-217,共3页
本文基于大数据分析技术,完成对计算机网络日志分析系统的科学化设计。首先,结合系统可行性分析,完成对系统架构设计和系统运行环境的搭建。其次,建设用户登录模块、日志采集模块、关联规则挖掘模块、安全审计模块、数据库管理模块五大...
本文基于大数据分析技术,完成对计算机网络日志分析系统的科学化设计。首先,结合系统可行性分析,完成对系统架构设计和系统运行环境的搭建。其次,建设用户登录模块、日志采集模块、关联规则挖掘模块、安全审计模块、数据库管理模块五大模块,保证系统功能实现效果。最后,测试系统功能。结果表明:本文所设计的计算机网络日志分析系统不仅可以保证日志获取的完整性和有效性,还能实现对隐藏性关联规则的分析和挖掘,保证系统日志分析结果的真实性和可靠性,完全符合预期设计目标,为相关人员提供有效的借鉴和参考。
展开更多
关键词
大数据
日志
采集
MAPREDUCE
日志分析
IP统计
下载PDF
职称材料
日志分析整合策略在杭州地铁信号系统维护中的应用
被引量:
1
8
作者
刘追明
田文礼
+1 位作者
张翔
梅满
《铁道通信信号》
2023年第7期73-79,共7页
结合杭州地铁长期运营过程中信号各子系统故障发生前的征兆,从车载信号、区域控制器及车地无线通信等运行日志中,提炼和整合分析列车定位、网络延迟、网络干扰、网络中断等重要信息,通过数据透视图表等分析工具直观展示设备隐患信息,以...
结合杭州地铁长期运营过程中信号各子系统故障发生前的征兆,从车载信号、区域控制器及车地无线通信等运行日志中,提炼和整合分析列车定位、网络延迟、网络干扰、网络中断等重要信息,通过数据透视图表等分析工具直观展示设备隐患信息,以此完善对设备的预防性维修机制,从而在设备发生故障前提前介入,防止列车紧急制动故障的发生。
展开更多
关键词
地铁
信号系统
日志分析
整合
预防性维修
网络干扰
下载PDF
职称材料
基于Hadoop的分布式日志分析系统设计与实现
9
作者
周德
杨成慧
罗佃斌
《现代信息科技》
2023年第23期57-60,共4页
网络日志解析是确保监控系统稳定运行和检测故障的重要任务之一。然而,日志文件的数据量庞大,数据格式也相对复杂,难以手动处理。在此背景下,对基于Hadoop分布式计算框架的网络日志分析系统的设计和实现进行了研究,通过将数据分解成块,...
网络日志解析是确保监控系统稳定运行和检测故障的重要任务之一。然而,日志文件的数据量庞大,数据格式也相对复杂,难以手动处理。在此背景下,对基于Hadoop分布式计算框架的网络日志分析系统的设计和实现进行了研究,通过将数据分解成块,并通过多台计算机并行处理数据块来提高数据处理速度和效率。系统使用了Hadoop的MapReduce编程模型来实现网络日志数据的解析和处理。实验结果表明,相比传统方法,该系统具有更高的数据处理速度和可伸缩性,证明其有效性和实用性。
展开更多
关键词
网络
日志
HADOOP平台
分布式计算
MAPREDUCE
日志分析
下载PDF
职称材料
一种基于深度学习日志分析模型的压力测试算法
10
作者
卢璐
杨子江
《计算机科学与应用》
2023年第5期1109-1118,共10页
软件新系统上线前,常常需要对生产运行的系统开展压力测试,以规避系统因突发巨量客户端访问或生产过程中多用户集中操作,而出现报错及系统崩溃等严重问题。本文提出了一种基于深度学习日志分析模型的压力测试算法,该算法基于现有生产日...
软件新系统上线前,常常需要对生产运行的系统开展压力测试,以规避系统因突发巨量客户端访问或生产过程中多用户集中操作,而出现报错及系统崩溃等严重问题。本文提出了一种基于深度学习日志分析模型的压力测试算法,该算法基于现有生产日志数据创建双向长短期记忆循环神经网络(Bi-LSTM)的分析模型,搭建并预测基于生产日志规律的闭环测试场景,模拟预测生产环境的理论测试场景,作为传统基于规则压力测试方法的补充。实验结果表明,使用本文所提双向LSTM分析模型可以有效地模拟生产日志的规律,使得压力测试更贴近真实场景,能有效观察系统运行状况,多维度了解系统性能的极限和缺陷。
展开更多
关键词
深度学习
日志分析
压力测试
双向长短期记忆循环神经网络
下载PDF
职称材料
基于网络设备日志分析的网络安全预警技术系统设计
11
作者
卓杰
《信息记录材料》
2023年第9期218-220,223,共4页
为保证网络设备日志数据的安全性,本文应用网络设备日志分析相关技术,设计一款功能完善、实用性强的网络安全预警技术系统。首先,在严格遵循系统设计原则的基础上,完成对系统架构和系统数据库的设计;其次,分别设计用户登录模块、安全性...
为保证网络设备日志数据的安全性,本文应用网络设备日志分析相关技术,设计一款功能完善、实用性强的网络安全预警技术系统。首先,在严格遵循系统设计原则的基础上,完成对系统架构和系统数据库的设计;其次,分别设计用户登录模块、安全性验证模块、数据预处理模块、日志分析模块等模块,保证系统功能实现效果。最后,对系统进行测试。结果表明:本文所设计的网络安全预警技术系统不仅可以全面化采集和智能化管理不同网络设备相关日志数据,还能智能化检测和预警系统存在的安全威胁,提高系统网络的安全性和可靠性,完全符合预期设计标准和要求。希望通过这次研究,为相关人员提供有效的借鉴和参考。
展开更多
关键词
日志分析
数据挖掘
网络安全预警
下载PDF
职称材料
基于Hadoop平台的日志分析模型
被引量:
14
12
作者
于兆良
张文涛
+2 位作者
葛慧
艾伟
孙运乾
《计算机工程与设计》
北大核心
2016年第2期338-344,428,共8页
为提高企业网络内海量日志数据的分析效率,构建基于Hadoop平台的日志分析模型。对模型框架进行总体设计,提出一种MapReduce编程模式的Apriori并行化算法,基于该算法对历史日志进行数据挖掘分析,计算用户行为的频繁模式,建立用户正常行...
为提高企业网络内海量日志数据的分析效率,构建基于Hadoop平台的日志分析模型。对模型框架进行总体设计,提出一种MapReduce编程模式的Apriori并行化算法,基于该算法对历史日志进行数据挖掘分析,计算用户行为的频繁模式,建立用户正常行为规则库,将实时日志与规则库中的规则进行模式匹配,实现对用户异常行为的检测。实验结果表明,该模型算法明显提高了日志分析效率。
展开更多
关键词
HADOOP平台
日志分析
MapReduce编程模式
APRIORI算法
数据挖掘
并行化
下载PDF
职称材料
基于大数据的网络日志分析技术
被引量:
16
13
作者
应毅
任凯
刘亚军
《计算机科学》
CSCD
北大核心
2018年第B11期353-355,共3页
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapReduce模型下重新实现...
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapReduce模型下重新实现了IP统计算法和异常检测算法。实验证明,在数据密集型计算中使用大数据技术可以明显提高算法的执行效率和增加系统的可扩展性。
展开更多
关键词
大数据
HADOOP
MAPREDUCE
日志分析
异常检测
下载PDF
职称材料
基于大数据技术的网络日志分析系统研究
被引量:
39
14
作者
任凯
邓武
俞琰
《现代电子技术》
北大核心
2016年第2期39-41,44,共4页
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案,即由多台计算机完成日志文件的存储、分析和挖掘工作;建立了一个分层的网络日志分析系统:Syslog完成日志采集,Hadoop负责分布式存储...
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案,即由多台计算机完成日志文件的存储、分析和挖掘工作;建立了一个分层的网络日志分析系统:Syslog完成日志采集,Hadoop负责分布式存储和并行计算,在MapReduce框架下重新实现了IP统计算法。实验结果表明,在数据密集型计算中使用大数据技术可以明显提高算法的执行效率和系统的可扩展性。
展开更多
关键词
大数据
日志
采集
MAPREDUCE
日志分析
IP统计
下载PDF
职称材料
一种基于日志分析的Web负载测试方法
被引量:
8
15
作者
朱靖君
吴海燕
+1 位作者
高国柱
程志锐
《计算机工程》
CAS
CSCD
北大核心
2010年第23期25-27,共3页
提出一种基于日志分析的Web负载测试方法。通过序列模式挖掘得到用户访问的频繁序列模式,日志分析得到负载的相关参数,并据此构造出逼近于真实的测试负载。利用性能测试工具LoadRunner对Web应用系统进行负载测试。将测试日志与真实日志...
提出一种基于日志分析的Web负载测试方法。通过序列模式挖掘得到用户访问的频繁序列模式,日志分析得到负载的相关参数,并据此构造出逼近于真实的测试负载。利用性能测试工具LoadRunner对Web应用系统进行负载测试。将测试日志与真实日志进行对比,验证了测试负载与真实负载的相似性。
展开更多
关键词
日志分析
负载测试
序列模式挖掘
PREFIXSPAN算法
下载PDF
职称材料
基于Hadoop的分布式日志分析系统
被引量:
6
16
作者
陈文波
张秀娟
+1 位作者
李林
唐钧
《广西大学学报(自然科学版)》
CAS
CSCD
北大核心
2011年第A01期339-342,共4页
就如何防御泛洪攻击问题,建立了基于Hadoop的分布式日志分析系统。通过快速提炼访问日志中每个IP地址的请求次数,获取其中请求频率较大的异常IP以有效甄别攻击源,进而为解决泛洪攻击提供重要的现实依据。通过实验,我们不仅验证出分布式...
就如何防御泛洪攻击问题,建立了基于Hadoop的分布式日志分析系统。通过快速提炼访问日志中每个IP地址的请求次数,获取其中请求频率较大的异常IP以有效甄别攻击源,进而为解决泛洪攻击提供重要的现实依据。通过实验,我们不仅验证出分布式日志分析模式较单机模式的巨大时效性优势,还搭建由不同文件系统为基底的虚拟机担当Slaves的两种分布式集群环境,并对两者性能做了详细的对比和分析。
展开更多
关键词
泛洪攻击
日志分析
HADOOP
分布式计算
虚拟机
下载PDF
职称材料
基于Oracle的日志分析器
被引量:
8
17
作者
梁为
凌怀新
+1 位作者
张晓刚
潘久辉
《计算机应用》
CSCD
北大核心
2003年第7期121-123,126,共4页
文中介绍了一种利用Oracle提供的分析工具LogMiner来读取和分析Oracle日志的分析器,并给出一种获取基表变化记录真实值的方法,同时还引入了用户规则,使该分析器能根据用户的需求对Oracle日志进行分析处理,把用户需要的信息提取出来。
关键词
事务
日志
日志分析
器
ORACLE
LOGMINER
下载PDF
职称材料
图书馆个性化服务中的Web日志分析技术研究
被引量:
9
18
作者
陈雅
谭华军
郑建明
《图书馆杂志》
CSSCI
北大核心
2011年第7期43-46,54,共5页
通过总结国内外日志分析研究,发现日志分析研究主要集中在应用研究领域。在明确日志分析基本概念、研究方法与工具、预处理技术、聚类与分析技术的基础之上,探讨图书馆个性化服务中日志分析的实现,并构建了图书馆日志分析系统模型。
关键词
日志分析
数据挖掘
预处理技术
个性化服务
下载PDF
职称材料
基于FP-Growth算法的安全日志分析系统
被引量:
7
19
作者
马文
朱志祥
+1 位作者
吴晨
万一
《电子科技》
2016年第9期94-97,共4页
传统日志分析存在单一事件分析不全面的问题,难以检测出新型攻击事件。针对这种情况,文中提出一种基于FP-Growth算法的安全日志分析系统,以电子政务平台产生的Web日志为主要研究对象,对日志进行了挖掘过滤分析,统计分析结果通过图表、...
传统日志分析存在单一事件分析不全面的问题,难以检测出新型攻击事件。针对这种情况,文中提出一种基于FP-Growth算法的安全日志分析系统,以电子政务平台产生的Web日志为主要研究对象,对日志进行了挖掘过滤分析,统计分析结果通过图表、报表等直观的方式呈现。实验结果表明,该系统能有效地发现潜在的Web安全隐患,为平台的稳定运行和后期优化提供指导。
展开更多
关键词
网络安全
日志分析
FP-GROWTH
下载PDF
职称材料
主机日志分析及其在入侵检测中的应用
被引量:
16
20
作者
王伟
彭勤科
《计算机工程与应用》
CSCD
北大核心
2002年第13期35-37,179,共4页
主机日志在入侵检测中有着不可替代的作用,通过深入分析主机日志可以发现系统的异常行为。该文分析了主机日志的构成,主机日志在计算机安全领域中的应用,并给出了常用的主机日志和基于主机日志的入侵检测系统。主机日志的分析方法有很多...
主机日志在入侵检测中有着不可替代的作用,通过深入分析主机日志可以发现系统的异常行为。该文分析了主机日志的构成,主机日志在计算机安全领域中的应用,并给出了常用的主机日志和基于主机日志的入侵检测系统。主机日志的分析方法有很多,文章对这些方法进行了分类并对它们进行了详细的讨论。最后,给出了一种基于主机日志分析的入侵检测通用模型。
展开更多
关键词
主机
日志分析
入侵检测
计算机网络
网络安全
下载PDF
职称材料
题名
基于区块链的堡垒机日志分析系统设计与实现
1
作者
代雅琳
张爱清
余斌
周桐
机构
安徽师范大学物理与电子信息学院
中国科学院合肥物质科学研究院信息中心
中国科学技术大学研究生院科学岛分院
中国科学技术学院合肥技术创新工程院
出处
《计算机与数字工程》
2024年第8期2294-2299,2354,共7页
基金
安徽省自然科学基金优秀青年科学基金项目(编号:2108085Y22)
高等学校区块链技术创新应用计划(编号:202qkl18)资助。
文摘
现有的堡垒机运维和审计过程中存在操作日志被篡改、管理员权利过大、中心化身份认证和资源不受控制等问题,论文设计并实现一套基于区块链的堡垒机日志分析系统,利用智能合约和星际文件系统,将堡垒机的管理、运维、审计等操作日志数据锚定在区块链上,形成可追溯、不可篡改的记录。结合智能合约、数据上链存证等技术,为用户提供运维审计流程的完整信息记录,也为个体公司或者司法机构提供数据无失真的证据保留和追责方法。系统实现及分析结果表明,该系统为现有不同类型的堡垒机系统提供辅助应用,具有不可篡改、可信度高、可溯源等特点,为堡垒机的管理和运维提供了新的思路和技术支持。
关键词
区块链
堡垒机
智能合约
星际文件系统
日志分析
Keywords
blockchain
bastion machine
smart contract
inter planetary file system
log analysis
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
CarbonData在网络安全日志分析场景下的性能评估
2
作者
黄必栋
机构
南京铁道职业技术学院智能工程学院
出处
《科学技术创新》
2024年第5期99-105,共7页
文摘
本文针对企业网络安全日志分析场景,采用实际网络安全日志数据,设计建表和测试方法,使用大数据引擎Spark SQL和Presto对索引行列混合式数据格式CarbonData进行了性能评估。通过测试得出,基于Spark SQL+CarbonData方案的数据查询和统计效率较高,能满足多种数据处理和分析要求,适用于网络安全日志分析应用。本文为企业网络安全日志分析方案的技术选型和设计提供参考。
关键词
CarbonData
Spark
SQL
性能评估
安全
日志分析
Keywords
CarbonData
Spark SQL
performance evaluation
security log analysis
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
河北高速公路日志分析系统
3
作者
赵建新
机构
河北睿通高速公路联网运营有限责任公司
出处
《中国交通信息化》
2024年第5期77-82,共6页
文摘
随着高速公路收费稽核、跨省交易对账和运行监测等收费业务的发展,对收费软件日志进行集中存储并分析的需求不断增加。为了满足这一需求,本文对收费软件日志存储及使用现状进行了分析,提出构建日志管理分析系统。该系统通过在省中心建立Elasticsearch集群,对原始日志文件进行集中存储,并由日志分析服务对集中存储的日志进行分析处理,以实现收费软件的日志采集、存储、分析和结果的可视化展示,从而提升业务人员的工作效率。
关键词
高速公路
收费软件
车道
日志
日志分析
分类号
U495 [交通运输工程—交通运输规划与管理]
下载PDF
职称材料
题名
基于大数据的交易日志分析系统的设计和实现
4
作者
林滔
机构
贺州市公共资源交易中心
出处
《软件》
2024年第5期58-60,共3页
文摘
为更好地构建统一管理的数据仓库,对交易日志分析范围内的所有相关应用软件提供统一的数据服务,本文应用大数据技术,完成对交易日志分析系统的设计和实现,并在SimuWorks平台下使用25个交易平台近1年的真实日志数据进行数据模拟,研究交易日志分析数据的准确率。结果表明,数据交易日志分析系统下的新方案可节约超过85%的数据仓库硬件设施,提升约82.7%的日志分析数据的准确率。因此,基于数据的交易日志分析系统具有较强的使用价值,日志分析数据读写响应时间也得到了显著提升。
关键词
大数据
数据仓库
数据模拟
交易
日志分析
硬件设施
Keywords
big data
data warehouse
data simulation
trading log analysis
hardware facilities
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于ChatGLM的应用程序日志分析系统
5
作者
张世程
周梦广
机构
奥克斯集团有限公司
灵璧县第二中学
出处
《计算机应用文摘》
2024年第11期104-105,109,共3页
文摘
在以大语言模型为代表的人工智能技术高速发展下,自然语言处理技术发展日新月异,被广泛应用于生产生活。然而,应用程序日志随着数据量的提升变得越发复杂,难以实现高效地分析与处理。对此,文章提出了一种基于大语言模型ChatGLM的分析处理方法,同时设计了一个日志分析系统。该系统借助ChatGLM具有的高效文本建模能力,采用微服务架构设计及容器部署,达到了高效、省时、省力的目标,为大规模日志分析提供了一种有益的思路。
关键词
人工智能
大语言模型
日志分析
微服务
容器
Keywords
artificial intelligence
large language model
log analysis
microservices
container
分类号
TP311 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于ELK的内容分发网络日志分析平台设计
被引量:
1
6
作者
林黄智
田柳
范之国
机构
安徽职业技术学院机电工程系
安徽职业技术学院汽车工程系
合肥工业大学计算机与信息学院
出处
《安庆师范大学学报(自然科学版)》
2023年第1期79-84,共6页
文摘
随着内容分发网络系统承载着越来越多的大流量视频业务,其规模不断增大且对用户日志收集和集中处理的需求也越来越高,为提升日志处理效率,本文设计了一种基于实时日志搜索和分析系统(ELK)的日志分析平台,可通过对海量的用户访问日志进行实时采集和检索,并捕获用户异常访问记录,从而实现了对系统性能和业务质量的可视化自动监控及提前预警,并提高了内容分发网络系统智能化运维效率。
关键词
内容分发网络
实时
日志
搜索和
分析
系统
系统监控
日志分析
Keywords
content delivery network
real-time log search and analysis system
system monitoring
log analysis
分类号
TP399 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
基于大数据分析技术的计算机网络日志分析系统设计
被引量:
2
7
作者
宋立萍
机构
吉林通用航空职业技术学院
出处
《信息记录材料》
2023年第6期215-217,共3页
文摘
本文基于大数据分析技术,完成对计算机网络日志分析系统的科学化设计。首先,结合系统可行性分析,完成对系统架构设计和系统运行环境的搭建。其次,建设用户登录模块、日志采集模块、关联规则挖掘模块、安全审计模块、数据库管理模块五大模块,保证系统功能实现效果。最后,测试系统功能。结果表明:本文所设计的计算机网络日志分析系统不仅可以保证日志获取的完整性和有效性,还能实现对隐藏性关联规则的分析和挖掘,保证系统日志分析结果的真实性和可靠性,完全符合预期设计目标,为相关人员提供有效的借鉴和参考。
关键词
大数据
日志
采集
MAPREDUCE
日志分析
IP统计
分类号
TP39 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
日志分析整合策略在杭州地铁信号系统维护中的应用
被引量:
1
8
作者
刘追明
田文礼
张翔
梅满
机构
杭州杭港地铁有限公司
出处
《铁道通信信号》
2023年第7期73-79,共7页
文摘
结合杭州地铁长期运营过程中信号各子系统故障发生前的征兆,从车载信号、区域控制器及车地无线通信等运行日志中,提炼和整合分析列车定位、网络延迟、网络干扰、网络中断等重要信息,通过数据透视图表等分析工具直观展示设备隐患信息,以此完善对设备的预防性维修机制,从而在设备发生故障前提前介入,防止列车紧急制动故障的发生。
关键词
地铁
信号系统
日志分析
整合
预防性维修
网络干扰
Keywords
Metro
Signal system
Log analysis integration
Preventive maintenance
Network interference
分类号
U282 [交通运输工程—交通信息工程及控制]
下载PDF
职称材料
题名
基于Hadoop的分布式日志分析系统设计与实现
9
作者
周德
杨成慧
罗佃斌
机构
西北民族大学电气工程学院
出处
《现代信息科技》
2023年第23期57-60,共4页
文摘
网络日志解析是确保监控系统稳定运行和检测故障的重要任务之一。然而,日志文件的数据量庞大,数据格式也相对复杂,难以手动处理。在此背景下,对基于Hadoop分布式计算框架的网络日志分析系统的设计和实现进行了研究,通过将数据分解成块,并通过多台计算机并行处理数据块来提高数据处理速度和效率。系统使用了Hadoop的MapReduce编程模型来实现网络日志数据的解析和处理。实验结果表明,相比传统方法,该系统具有更高的数据处理速度和可伸缩性,证明其有效性和实用性。
关键词
网络
日志
HADOOP平台
分布式计算
MAPREDUCE
日志分析
Keywords
network log
Hadoop platform
distributed computing
MapReduce
log analysis
分类号
TP311.1 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
一种基于深度学习日志分析模型的压力测试算法
10
作者
卢璐
杨子江
机构
东方证券股份有限公司
出处
《计算机科学与应用》
2023年第5期1109-1118,共10页
文摘
软件新系统上线前,常常需要对生产运行的系统开展压力测试,以规避系统因突发巨量客户端访问或生产过程中多用户集中操作,而出现报错及系统崩溃等严重问题。本文提出了一种基于深度学习日志分析模型的压力测试算法,该算法基于现有生产日志数据创建双向长短期记忆循环神经网络(Bi-LSTM)的分析模型,搭建并预测基于生产日志规律的闭环测试场景,模拟预测生产环境的理论测试场景,作为传统基于规则压力测试方法的补充。实验结果表明,使用本文所提双向LSTM分析模型可以有效地模拟生产日志的规律,使得压力测试更贴近真实场景,能有效观察系统运行状况,多维度了解系统性能的极限和缺陷。
关键词
深度学习
日志分析
压力测试
双向长短期记忆循环神经网络
分类号
TP3 [自动化与计算机技术—计算机科学与技术]
下载PDF
职称材料
题名
基于网络设备日志分析的网络安全预警技术系统设计
11
作者
卓杰
机构
临汾职业技术学院
出处
《信息记录材料》
2023年第9期218-220,223,共4页
文摘
为保证网络设备日志数据的安全性,本文应用网络设备日志分析相关技术,设计一款功能完善、实用性强的网络安全预警技术系统。首先,在严格遵循系统设计原则的基础上,完成对系统架构和系统数据库的设计;其次,分别设计用户登录模块、安全性验证模块、数据预处理模块、日志分析模块等模块,保证系统功能实现效果。最后,对系统进行测试。结果表明:本文所设计的网络安全预警技术系统不仅可以全面化采集和智能化管理不同网络设备相关日志数据,还能智能化检测和预警系统存在的安全威胁,提高系统网络的安全性和可靠性,完全符合预期设计标准和要求。希望通过这次研究,为相关人员提供有效的借鉴和参考。
关键词
日志分析
数据挖掘
网络安全预警
分类号
TP309 [自动化与计算机技术—计算机系统结构]
下载PDF
职称材料
题名
基于Hadoop平台的日志分析模型
被引量:
14
12
作者
于兆良
张文涛
葛慧
艾伟
孙运乾
机构
中国航天工程咨询中心
出处
《计算机工程与设计》
北大核心
2016年第2期338-344,428,共8页
文摘
为提高企业网络内海量日志数据的分析效率,构建基于Hadoop平台的日志分析模型。对模型框架进行总体设计,提出一种MapReduce编程模式的Apriori并行化算法,基于该算法对历史日志进行数据挖掘分析,计算用户行为的频繁模式,建立用户正常行为规则库,将实时日志与规则库中的规则进行模式匹配,实现对用户异常行为的检测。实验结果表明,该模型算法明显提高了日志分析效率。
关键词
HADOOP平台
日志分析
MapReduce编程模式
APRIORI算法
数据挖掘
并行化
Keywords
Hadoop platform
log analysis
MapReduce programming mode
Apriori
data mining
parallelization
分类号
TP391 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
基于大数据的网络日志分析技术
被引量:
16
13
作者
应毅
任凯
刘亚军
机构
三江学院计算机科学与工程学院
南京大学金陵学院
东南大学计算机科学与工程学院
出处
《计算机科学》
CSCD
北大核心
2018年第B11期353-355,共3页
基金
江苏省高等学校自然科学研究面上项目(17KJB520033)资助
文摘
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapReduce模型下重新实现了IP统计算法和异常检测算法。实验证明,在数据密集型计算中使用大数据技术可以明显提高算法的执行效率和增加系统的可扩展性。
关键词
大数据
HADOOP
MAPREDUCE
日志分析
异常检测
Keywords
Big data
Hadoop
MapReduce
Log analysis
Outlier detection
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
基于大数据技术的网络日志分析系统研究
被引量:
39
14
作者
任凯
邓武
俞琰
机构
南京大学金陵学院
大连交通大学软件学院
东南大学成贤学院
出处
《现代电子技术》
北大核心
2016年第2期39-41,44,共4页
基金
国家自然科学基金项目(U1433124)
文摘
传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案,即由多台计算机完成日志文件的存储、分析和挖掘工作;建立了一个分层的网络日志分析系统:Syslog完成日志采集,Hadoop负责分布式存储和并行计算,在MapReduce框架下重新实现了IP统计算法。实验结果表明,在数据密集型计算中使用大数据技术可以明显提高算法的执行效率和系统的可扩展性。
关键词
大数据
日志
采集
MAPREDUCE
日志分析
IP统计
Keywords
big data
log acquisition
MapReduce
log analysis
IP statistics
分类号
TN915-34 [电子电信—通信与信息系统]
下载PDF
职称材料
题名
一种基于日志分析的Web负载测试方法
被引量:
8
15
作者
朱靖君
吴海燕
高国柱
程志锐
机构
清华大学计算机与信息管理中心
出处
《计算机工程》
CAS
CSCD
北大核心
2010年第23期25-27,共3页
基金
国家"863"计划基金资助项目(2007AA010306)
文摘
提出一种基于日志分析的Web负载测试方法。通过序列模式挖掘得到用户访问的频繁序列模式,日志分析得到负载的相关参数,并据此构造出逼近于真实的测试负载。利用性能测试工具LoadRunner对Web应用系统进行负载测试。将测试日志与真实日志进行对比,验证了测试负载与真实负载的相似性。
关键词
日志分析
负载测试
序列模式挖掘
PREFIXSPAN算法
Keywords
log analysis
load test
sequential pattern mining
PrefixSpan algorithm
分类号
TP311.52 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
基于Hadoop的分布式日志分析系统
被引量:
6
16
作者
陈文波
张秀娟
李林
唐钧
机构
兰州大学通信网络中心
出处
《广西大学学报(自然科学版)》
CAS
CSCD
北大核心
2011年第A01期339-342,共4页
文摘
就如何防御泛洪攻击问题,建立了基于Hadoop的分布式日志分析系统。通过快速提炼访问日志中每个IP地址的请求次数,获取其中请求频率较大的异常IP以有效甄别攻击源,进而为解决泛洪攻击提供重要的现实依据。通过实验,我们不仅验证出分布式日志分析模式较单机模式的巨大时效性优势,还搭建由不同文件系统为基底的虚拟机担当Slaves的两种分布式集群环境,并对两者性能做了详细的对比和分析。
关键词
泛洪攻击
日志分析
HADOOP
分布式计算
虚拟机
Keywords
flooding attack
log analysis
Hadoop
distributed computation
virtual machine
分类号
TP393 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
基于Oracle的日志分析器
被引量:
8
17
作者
梁为
凌怀新
张晓刚
潘久辉
机构
华南师范大学计算机科学系
华南师范大学增城学院计算机系
暨南大学计算机系
出处
《计算机应用》
CSCD
北大核心
2003年第7期121-123,126,共4页
基金
广州市软件专项基金资助项目 (2 0 0 2Z3 -D3 0 6 1 )
文摘
文中介绍了一种利用Oracle提供的分析工具LogMiner来读取和分析Oracle日志的分析器,并给出一种获取基表变化记录真实值的方法,同时还引入了用户规则,使该分析器能根据用户的需求对Oracle日志进行分析处理,把用户需要的信息提取出来。
关键词
事务
日志
日志分析
器
ORACLE
LOGMINER
Keywords
transaction
log
log analyzer
Oracle
LogMiner
分类号
TP311.5 [自动化与计算机技术—计算机软件与理论]
下载PDF
职称材料
题名
图书馆个性化服务中的Web日志分析技术研究
被引量:
9
18
作者
陈雅
谭华军
郑建明
机构
南京大学信息管理系
出处
《图书馆杂志》
CSSCI
北大核心
2011年第7期43-46,54,共5页
基金
中国高等教育数字图书馆发展模式研究(10YJA870002)成果之一
文摘
通过总结国内外日志分析研究,发现日志分析研究主要集中在应用研究领域。在明确日志分析基本概念、研究方法与工具、预处理技术、聚类与分析技术的基础之上,探讨图书馆个性化服务中日志分析的实现,并构建了图书馆日志分析系统模型。
关键词
日志分析
数据挖掘
预处理技术
个性化服务
Keywords
Log analysis
Data mining
Preprocessing technology
Personalized service
分类号
G250.73 [文化科学—图书馆学]
下载PDF
职称材料
题名
基于FP-Growth算法的安全日志分析系统
被引量:
7
19
作者
马文
朱志祥
吴晨
万一
机构
西安邮电大学物联网与两化融合研究院
出处
《电子科技》
2016年第9期94-97,共4页
基金
陕西省信息化技术研究基金资助项目(2015-002)
文摘
传统日志分析存在单一事件分析不全面的问题,难以检测出新型攻击事件。针对这种情况,文中提出一种基于FP-Growth算法的安全日志分析系统,以电子政务平台产生的Web日志为主要研究对象,对日志进行了挖掘过滤分析,统计分析结果通过图表、报表等直观的方式呈现。实验结果表明,该系统能有效地发现潜在的Web安全隐患,为平台的稳定运行和后期优化提供指导。
关键词
网络安全
日志分析
FP-GROWTH
Keywords
snetwork security
log analysis
FP - Growth
分类号
TP393.08 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
主机日志分析及其在入侵检测中的应用
被引量:
16
20
作者
王伟
彭勤科
机构
西安交通大学系统工程研究所
出处
《计算机工程与应用》
CSCD
北大核心
2002年第13期35-37,179,共4页
基金
国家863高技术发展研究计划(编号:2001AA140213)
国家杰出青年基金(编号:6970025)
文摘
主机日志在入侵检测中有着不可替代的作用,通过深入分析主机日志可以发现系统的异常行为。该文分析了主机日志的构成,主机日志在计算机安全领域中的应用,并给出了常用的主机日志和基于主机日志的入侵检测系统。主机日志的分析方法有很多,文章对这些方法进行了分类并对它们进行了详细的讨论。最后,给出了一种基于主机日志分析的入侵检测通用模型。
关键词
主机
日志分析
入侵检测
计算机网络
网络安全
Keywords
Audit trails,Intrus ion detection,computer security,anomaly detection
分类号
TP393.08 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
基于区块链的堡垒机日志分析系统设计与实现
代雅琳
张爱清
余斌
周桐
《计算机与数字工程》
2024
0
下载PDF
职称材料
2
CarbonData在网络安全日志分析场景下的性能评估
黄必栋
《科学技术创新》
2024
0
下载PDF
职称材料
3
河北高速公路日志分析系统
赵建新
《中国交通信息化》
2024
0
下载PDF
职称材料
4
基于大数据的交易日志分析系统的设计和实现
林滔
《软件》
2024
0
下载PDF
职称材料
5
基于ChatGLM的应用程序日志分析系统
张世程
周梦广
《计算机应用文摘》
2024
0
下载PDF
职称材料
6
基于ELK的内容分发网络日志分析平台设计
林黄智
田柳
范之国
《安庆师范大学学报(自然科学版)》
2023
1
下载PDF
职称材料
7
基于大数据分析技术的计算机网络日志分析系统设计
宋立萍
《信息记录材料》
2023
2
下载PDF
职称材料
8
日志分析整合策略在杭州地铁信号系统维护中的应用
刘追明
田文礼
张翔
梅满
《铁道通信信号》
2023
1
下载PDF
职称材料
9
基于Hadoop的分布式日志分析系统设计与实现
周德
杨成慧
罗佃斌
《现代信息科技》
2023
0
下载PDF
职称材料
10
一种基于深度学习日志分析模型的压力测试算法
卢璐
杨子江
《计算机科学与应用》
2023
0
下载PDF
职称材料
11
基于网络设备日志分析的网络安全预警技术系统设计
卓杰
《信息记录材料》
2023
0
下载PDF
职称材料
12
基于Hadoop平台的日志分析模型
于兆良
张文涛
葛慧
艾伟
孙运乾
《计算机工程与设计》
北大核心
2016
14
下载PDF
职称材料
13
基于大数据的网络日志分析技术
应毅
任凯
刘亚军
《计算机科学》
CSCD
北大核心
2018
16
下载PDF
职称材料
14
基于大数据技术的网络日志分析系统研究
任凯
邓武
俞琰
《现代电子技术》
北大核心
2016
39
下载PDF
职称材料
15
一种基于日志分析的Web负载测试方法
朱靖君
吴海燕
高国柱
程志锐
《计算机工程》
CAS
CSCD
北大核心
2010
8
下载PDF
职称材料
16
基于Hadoop的分布式日志分析系统
陈文波
张秀娟
李林
唐钧
《广西大学学报(自然科学版)》
CAS
CSCD
北大核心
2011
6
下载PDF
职称材料
17
基于Oracle的日志分析器
梁为
凌怀新
张晓刚
潘久辉
《计算机应用》
CSCD
北大核心
2003
8
下载PDF
职称材料
18
图书馆个性化服务中的Web日志分析技术研究
陈雅
谭华军
郑建明
《图书馆杂志》
CSSCI
北大核心
2011
9
下载PDF
职称材料
19
基于FP-Growth算法的安全日志分析系统
马文
朱志祥
吴晨
万一
《电子科技》
2016
7
下载PDF
职称材料
20
主机日志分析及其在入侵检测中的应用
王伟
彭勤科
《计算机工程与应用》
CSCD
北大核心
2002
16
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
2
…
28
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部