基于大数据技术的新闻采集和事件分析系统的设计与实现

为了解决获取互联网新闻时查找慢、数据杂、阅读效率低的问题,本文提出了一种基于大数据技术的新闻采集和事件分析系统。该系统首先采集互联网新闻数据,运用数据清洗、分布式存储等技术存到数据库;接着对数据进行分析,运用机器学习等技术,进而得到新闻主主题;然后新闻进行聚合,获取到事件主题;最后根据事件主体对所有时间进行展示,实现了对于互联网新闻的采集与事件分析的全过程。该系统提高了获取互联网新闻的效率,并解决了数据杂乱和阅读效率低的问题。

异构环境下信息设备综合管理平台网络信息事件的分析与采集

目的:通过对当前异构环境下的各类IT设备运行事件和日志进行整合,为信息设备综合管理平台提供统一数据源,实现设备和资源的集中管控。方法:AIX和各类UNIX设备事件通过syslog实时获取,并使用SSH和TELNET方式定期执行脚本指令集获取运行状态和指标;Windows服务器设备使用代理程序实时获取,并使用WMI服务获取当前设备运行状态和指标;网络设备事件通过syslog实时获取,并通过SNMP服务获取设备运行状态和性能指标。结果:通过各种数据采集方式,获取它们的运行状态、日志和运行指标,通过数据筛选为信息管理人员提供及时、准确和简捷的信息系统运行信息,使管理人员实时掌握信息系统运行过程中需要关注的异常或变化,及时采取应对措施。结论:通过对各类异构环境下的IT设备运行事件和日志的采集,可实现在信息设备综合管理平台实时掌控数据中心所有管理模块的事件信息,打破以往各个信息管理孤岛,帮助管理员更快速获取有价值的信息,提升管理工作效率。

基于大数据分析和复杂事件处理的金融信息服务平台

针对大数据时代下金融信息服务滞后性、片面性、同质化的问题,设计并实现了基于大数据分析和复杂事件处理的金融信息服务平台.该平台采用多通道采集、浅层语义处理等技术实现多源数据的采集、抽取与清洗,采用面向金融领域特征的网络观点分析等技术进行数据分析,为证券投资者、投资顾问及机构等三类用户提供及时、精准、个性化的金融信息服务,取得了良好的应用成效.

基于数据挖掘技术的用电异常分析系统设计

目前用电信息采集系统的全覆盖已实现对大量用电信息和异常事件的采集和存储,但由于缺乏相应的数据挖掘工具和系统,导致数据未能得到有效利用。文章基于用电信息采集系统所获得的海量数据,采用数据挖掘技术设计了一个用电异常分析系统。文章设计了系统的功能架构和物理架构,并给出了系统的业务流程。系统通过对异常事件的智能分析,指导用电检查人员进行针对性排查,可有效提高电力系统运行的安全性,为建设坚强智能电网提供有力保障。

基于网络云的大数据平台研究

网络云通过将网络功能作为软件运行于商用云基础设施来对网络进行虚拟化,而大数据平台能够采集关键性能使用、遥测和事件,以计算各种分析结果,并根据观察到的异常或重大事件采取适当措施进行响应。网络云和大数据平台的结合支持开发弹性、自修复、自学习网络。文章归纳为网络云设计数据平台需要遵循的关键设计原则,给出支持网络云的大数据平台高级架构,介绍采集、提取、存储和分析数据的平台方法,描述DCAE(数据采集、分析和事件)功能组件,研究微服务设计范式。

Bayesian事件关联算法在分布式入侵检测系统中的应用

如何准确有效地检测分布式网络环境下多源可疑的入侵事件,并能进行关联分析和判定是入侵检测的核心问题。本文研究了一种面向分布式多源传感器实时事件数据采集及关联分析的方法,运用Bayesian算法进行事件分类处理。本文所提的模型已经在我们承担的教育部重点科技课题中得到实际应用,这种方法在复杂网络环境下能有效地分析攻击报警事件,帮助管理员从大量数据中找到有效的信息。

入侵检测系统中事件产生器的设计和实现

入侵检测技术是一种新的安全保障技术,它用于对计算机和网络资源上的恶意使用行为进行识别和响应。本文主要介绍了入侵检测系统中数据采集和协议分析系统的设计,能够满足监测高速、大流量网络数据、低丢包率、实时转发数据的要求。

以网络全流量分析为基础的AIOps演进

今天,当我们回顾运维工作时,我们发现可以把其分为四个阶段。运维四阶段演进在运维1.0阶段,运维工作主要采用了指标监控、阀值报警的方法,其过程采取定义应用关键指标,利用事件触发细颗粒度数据采集的方法。但这种方法存在一个巨大的问题,就是故障分析的工作量成倍增长;另一方面,由于应用间调用关系的存在,判断故障根因必须参考多个应用在同一时刻的状态,导致故障根因的判断流程漫长,需要多部门协同工作,故障排查的时间无法控制。

高速公路交通事件自动检测、路段拥堵GIS显示研究

北京云星宇高速公路监控平台实现了数据采集、自动事件检测、交通状态分析、信息发布、CCTV监视、设备管理、报警管理、路段服务水平测算和辅助决策等功能。监控软件通过采集模拟器产生的各种信息（交通流参数信息、事件信息、设备状态信息、气象信息、收费系统信息等）．经过监控平台计算机系统计算和处理．实现管辖路段的交通状态自动分析和交通事件的自动检测等功能．并能自动生成部分交通控制方案．从而实现对紧急事件等的快速处理，避免或减轻交通拥挤及二次事故的发生。

开放式网络自动化平台技术架构研究

ONAP(开放式网络自动化平台)是一种软件定义的开源网络自动化平台,它通过SDC(服务设计和创建)模块来实现网络敏捷性、弹性和安全性,缩短上市时间,增加公司收入,提高网络可扩展性。文章分析ONAP的主要功能,描述ONAP的设计时框架和运行时执行框架,说明MSO(主服务编排器)、DCAE(数据采集分析和事件)、A&AI(活动与可用清单)、控制器和ONAP门户等ONAP组件的作用,介绍BSS(业务支撑系统)转型的内容和网络云环境中的BSS范围,最后对ETSI(欧洲电信标准化协会)MANO(管理和编排)架构和ONAP架构进行比较。

校园网入侵检测系统的设计与实现

高校信息化、网络化的不断发展,网络安全已经成为一个无法回避的问题,而且单纯依赖防火墙技术已经越来越不能满足需求,入侵检测作为安全防范的另一种重要手段也越来越突显出重要作用。本文架构了校园网入侵检测系统,并着重分析了其事件探测及数据采集模块和数据分析模块的设计方法与实现技术。

宝马730Li行驶中车身振动

故障现象一辆2014款宝马730Li轿车,从购买后就出现行驶中车身振动现象。故障诊断与排除该车是在今年3.15（国际消费者权益日）之前接到的一起车辆投诉事件。车主投诉该车辆在2013年10月购置后,始终存在一系列的问题,尤其是进入2015年后,出现制动时方向盘抖动,行驶中向右跑偏的问题,曾经更换过制动盘、制动片。

大数据分析技术在用电信息异常分析中的应用

科学技术发展迅猛，极大地推动了不同类型的数据库存储数据急剧的增长，但相应的海量数据的分析处理技术却未能取得突破性的发展，以至于很难满足实际需求。为了解决这个问题，发展数据分析技术迫在眉睫，特别是要将数据挖掘技术作为人工智能领域重点的研究对象。现如今，用电信息采集系统的广泛应用能够有效地实现用电信息、异常事件的采集、存储，但数据挖掘技术的缺失使得数据的利用效率较低。本文构建了一个以数据挖掘技术为基础的用电异常分析系统，对其物理架构、功能架构及业务流程做出了详细的阐述，能够实现异常事件的智能分析，保证了电力系统的安全运行，并为增强智能电网的建设提供了强有力的支持。

网络安全运营管理平台关键技术研究

分析了网络安全运营面临的问题、以及对网络安全运营管理平台的需求。总结了网络安全运营管理平台的建设现状。阐述了以网络安全事件综合分析、事件响应为核心的网络安全运营管理平台关键技术,并对其技术发展趋势进行了展望。

利用报警管理系统平台对工艺过程控制管控的设计实施与应用研究

本文通过对炼化企业控制系统报警现状调查研究,提出建立全厂的报警管理规整统一的报警管理平台。通过这一项目的实施案例,着重介绍项目的设计、实施、应用和运用该平台的大数据为依托实施的先进报警管理理念对全厂的工艺、设备、安全的管控,实现了工艺管理安全、平稳。

信息技术让城市“智慧”起来

智慧城市,对大众来说,已经不是个陌生的字眼了。在各地政府的推动下,在媒体的频繁报道下,人们知道了城市也要智慧化,知道了由此将带来的诸多好处。但智慧城市是如何运营的？是通过什么手段实现了城市的智慧化？对普通民众来说,完全是一头雾水。在此,我们以武大吉奥的智慧城市建设案例,带大家看一看这个有点＂玄妙＂的智慧世界。

大数据背景下电力营销信息安全审计探析

随着电力企业信息化工作的不断深入,电力企业在信息内网部署了内网安全监控管理系统,对内网用户行为及终端设备进行监控。由于目前的内网安全监控管理系统缺少对安全事件的审计功能或者相关功能薄弱,导致管理员无法准确掌握网络系统的安全状态,不能对网络行为进行跟踪分析,难以实现追查取证。通过大数据分析技术,对电力营销业务系统、用电信息采集系统的用户操作行为安全、业务安全和数据安全等进行自动审计分析,诊断挖掘营销业务操作的安全风险点,提出预警及改进建议。

宁波市鄞州区总工会多举措预防企业欠薪

为应对企业拖欠工资现象,切实保障职工合法权益,鄞州区总工会多措并举,做好欠薪预防工作。强化信息畅通。开通24小时欠薪维权热线,设立举报投诉专窗,落实每日12小时电话轮值制度,元旦春节期间24小时值班。对欠薪逃匿案件、恶性突发事件等重大事项,在7小时内上报上级工会,特大事件2小时内上报。强化内部排查。通过每季度企业用工信息采集,做好企业用工建档,掌握辖区内企业用工情况,通过数据分析、企业分级等措施找出重点监测单位。截至日前。