数据流信息从MySQL到HBase的迁移策略的研究

数据流信息在网络管理、网络安全和网络分析等方面具有十分重要的作用,然而,随着互联网的不断发展,网络中数据量极速增长,数据流信息变得越来越难以存储。结合数据流信息的本身特点和HBase数据库的优点,本文研究和实现了数据流信息从MySQL到HBase的迁移策略,完成数据库表和索引的转换设计,设计特有主键以支持多条件查询,并通过Hadoop实现HBase数据库表数据的分布式存储。测试结果表明将数据流信息存储在HBase中具有更高的稳定性、扩展性,并能够满足多条件查询需求。

6LoWPAN网络中基于HTTP协议的TCP首部压缩方法

在6LoWPAN网络中,网络层(IPv6)的最大传输单元(MTU)是1280字节,而IEEE 802.15.4标准规定的链路层MTU是127字节。因此,有必要对IPv6首部,TCP或UDP首部进行压缩,来减少通信时的数据分片。目前,IETF的6LoWPAN工作组已经定义了两种首部压缩编码格式,即LoWPAN_IPHC和LoWPAN_NHC,前者用于IPv6首部的压缩,后者则用于IPv6扩展首部和UDP首部的压缩,但没有面向于TCP的。而对于6LoWPAN上层应用来说,很多应用层协议是基于TCP的且倾向于Web处理方式。因此,本文提出了一种面向HTTP协议的TCP首部压缩方法,该方法可以看作是对LoWPAN_NHC编码的扩展且设计了一种全新的压缩编码格式LoWPAN_TCP_OP用于TCP选项的压缩。

基于OpenFlow的数据流管控系统的研究与实现

随着网络技术的不断发展,在现有的网络设备及协议基础之上,对已有网络进行创新性试验变得越来越困难。OpenFlow是为支持网络创新究而提出的新型网络技术,它的出现为部署一个大规模的、完全可控、可定制的实验网络平台提供了可能。本文旨在基于OpenFlow设计实现一个数据流管控系统,其主要思想是利用OpenFlow技术实现控制与转发的分离,通过集中控制的方式,实现对全网数据流的管控,提高OpenFlow网络的安全性。

基于OpenFlow平台的路由实验研究与实现

虽然当前有多种路由实验手段,但是都不能很好的满足研究人员的需求.而OpenFlow作为一个新兴的技术,它将网络的数据转发功能和逻辑控制功能分离开来,使得网络能够实现充分的可编程性.因此,科研人员开始研究以OpenFlow网络为基础开展网络实验.本文提出了一种基于OpenFlow技术的路由实验方法:用开源的网络模拟软件mininet模拟网络拓扑,用控制器控制流量的转发逻辑以达到实验目的.借助于开源的RouteFlow控制器平台,将路由的逻辑控制转移到通用的虚拟的计算环境中,使得模拟的OpenFlow网络具备路由转发功能.本文也搭建了的原型系统,证明了这种解决方案的可行性,为后期的实验工作提供了参考.

基于GPU的LCS算法加速机制研究与实现

协议特征识别技术中用到了一种重要的LCS算法,它是一种字符串比对算法,提取出字符串中的最长连续公共子串。然而,通过理论分析和实验表明:这个查找过程是一个时间复杂度较高的运算过程,如果输入的数据分组比较大,那么运行的时间将会非常长,为此不得不控制输入数据分组的大小和数量,这严重限制了所采用样本集的大小。提出了基于GPU对LCS运算实现加速的方法。在此基础上搭建和配置了CUDA平台,在此平台下研究并实现了LCS算法的并行性。通过对LCS算法在CUDA下并行性的研究,有效地加快了LCS算法的运行速度。实验结果表明,GPU下LCS算法的运行效率比CPU有了显著的提高。

未来互联网试验平台

相对于互联网上层应用和底层通信技术的蓬勃繁荣,互联网的基本网络架构并没有得到同步发展,还是基于设计之初的TCP/IP协议.随着应用环境、用户需求和底层设施的不断发展变化,现有的网络结构已暴露出越来越多的缺陷.针对这些问题,研究人员提出了许多新的网络架构、概念、服务、协议和算法,以构建不同于现有互联网的新型未来互联网.不过,任何一种新的思想在实现或部署到真实的网络之前,都必须经过严格的测试和验证.因此,构建大规模的、真实的、可控的试验平台不仅是未来互联网研究的基础,也是对未来互联网本身探索和研究的一种途径.文中从规模、功能、开放性等基本特性以及科学实验要素、网络元素类型三个方面对试验平台进行了归纳和分类;分析了试验平台的结构化原则和分层结构;重点分析和总结了构建试验平台的关键技术,包括实验描述语言、控制框架和网络资源分片技术;分析了国内试验平台的发展现状;最后探讨了未来互联网试验平台的发展趋势.

DVB+OTT终端管理系统的高并发处理方案

介绍了一种基于TR069协议(CPE广域网管理协议)的DVB/OTT终端管理系统的高并发处理方案。通过设置缓存区、使用线程池、设置终端开机延迟3个方面优化系统,可以有效地解决大规模的机顶盒终端同一时刻向终端管理系统发送请求而引起的高并发问题,从而保证终端管理系统能够在高并发环境下稳定运行。

基于日志统计特征的DNS隧道检测

以DNS服务器的日志为数据源,提取出二级域名的熵、子域名个数、缓存命中率等多维日志统计特征,将日志量化为特征向量集;以特征向量集为数据源,使用随机森林算法进行模型训练,并使用十折交叉验证的方法对模型参数进行调整,对模型进行优化,提高整体检测精度;在不同分类算法下进行对比实验,并将实验结果与已有研究方法进行比较.实验结果表明,提出的检测方法在召回率达到98.5%的情况下,有不低于90%的准确率,检测精度有所提高,即提出的算法能有效检测DNS隧道.

基于TTCN-3的CoAP一致性测试

协议一致性测试是确保协议实现与协议标准相一致的重要保障,有助于协议实现的进一步完善。CoAP(constrained application protocol)即受限应用协议是特别为受限节点和受限网络设计的通用应用层协议。CoAP目前仍处于草案阶段,对CoAP进行了分析,并基于标准化测试语言TTCN-3设计实现了CoAP一致性测试系统,并使用该系统对CoAP实现进行了测试。

一种基于NGOD架构的云应用服务管理方案

介绍了一种基于NGOD架构的云应用服务管理方案。通过对NGOD架构进行扩展,增加了应用服务器和应用服务器管理器两个模块,将个人计算机和手机、平板计算机等智能终端上的软件应用部署到广电网上,为用户提供更多更好的服务。

复合型日志的模板提取方法

为了解决目前复合型日志无法被模板提取算法正确解析的问题,设计新的模板提取算法CLEA来处理复合型日志的模板提取.该算法使用符号将所有日志划分为集群,基于Drain模板提取算法提取每个集群各自的日志模板,存储并缓存模板提取结果,在更新集群的同时更新缓存的模板;将差异度计算引入简单共有词算法中,增强简单共有词算法对模板中不同词语的敏感度,计算模板之间的相似度;设计BMerge算法,利用该算法对相似度大于阈值的模板进行合并,获取并输出合并日志作为最终结果.在相似度算法中引入差异度计算,增强算法对模板中不同词语的敏感度,并设计BMerge算法对模板进行合并,输出无损日志作为结果.所提方法适用于处理复合型日志,且正确率较高.

基于流量预测的日志写入方法

为了解决校园网络日志存储中流量变化导致的机械硬盘平均访问时间长、波动大的问题,设计了一种通过流量预测进行日志写入的方法。首先,提出流量定界算法对流量进行划分为高峰期、中间期与低谷期。然后,利用BP神经网络对不同时期的流量数据进行训练,构建流量预测模型。最后,基于流量预测模型,设计日志存储算法。实验结果表明:与已有的日志写入方法相比较,基于流量预测的日志写入方法在流量高峰期时机械硬盘的平均访问时间从90 ms减小至59 ms以下,同时,平均访问时间的方差从224.5降至50.2。

电信与通信工程学术研讨

2018年11月28~30日,北京邮电大学举办了2018第二届电信与通信工程国际会议。此次会议由新加坡南洋理工大学主办,北京邮电大学承办,由新加坡南洋理工大学Maode Ma教授和北京邮电大学网络技术研究院信息网络中心主任黄小红教授共同担任大会主席。

基于LDA模型的高校论坛热点提取系统

针对论坛缺乏热点话题提取方法的现状,提出一种将LDA(潜在狄利克雷分配)模型引入高校论坛场景主题的提取方式.在主题建模过程中,以回帖数量作为帖子热门程度的判定参数,根据帖子热门程度在语料中设置不同权重,随后使用Gibbs采样法提取主题.在此基础上设计并实现了包含数据抓取、文本预处理、主题提取三个模块的完整系统.将LDA模型引入系统并进行提取效果分析,实验结果表明LDA模型可以准确地提取出论坛文本中讨论的实时热点话题.