一种混合云场景下面向对象存储的数据分流聚合方法

利用开源的云计算技术构建一套适用于大型集团型企业的混合云场景下面向对象存储的数据分流和聚合技术,以统一对象存储PaaS服务的形式向业务端提供一种能安全接入的具有多样性源数据的交互场景。该方法采用云原生S3协议对异构对象存储服务进行重定义的封装、解析和转发控制,实现通过统一服务调度完成混合异构场景下面向对象存储的数据存取交互、复制迁移、定制化分层和汇聚合并加载等。该方法已在某大型航运集团型企业的跨境租箱应用场景中应用,结果表明其能在混合异构对象存储的业务场景下高效实现安全、灵活和弹性的数据统一交互。

基于深度学习的数字电网通信数据分流方法

随着智能电网的快速发展,海量多源异构通信数据的实时处理成为急需解决的问题。基于此,提出一种基于深度学习的数字电网通信数据分流方法,采用卷积神经网络(Convolutional Neural Network,CNN)和长短期记忆(Long Short-Term Memory,LSTM)混合模型自动提取数据的时空特征,实现高效准确的分类和优化传输。通过深入分析电网通信数据流特点,设计包括数据预处理、模型训练、分流决策的完整数据分流方案。实验结果表明,该方法在分类准确率、实时性能以及泛化能力上均优于传统方法。

大型警务数据处理系统中的数据分流平台设计

以往为大型警务数据处理系统设计的数据分流平台处于持续开发阶段,其分流速率、分流准确度和分流效果均不佳。因此,设计新型大型警务数据处理系统数据分流平台,其核心设备是ULV处理器。大型警务处理系统拥有三个层次的数据流,平台的ULV处理器使用物理层硬件对三个层次的数据流进行硬件分流,并利用已写入哈希映射函数分流方案的网络服务处理器,对硬件分流结果进行软件分流,给出第一、二层次数据流的分流结果。第三层次数据流经由协议分流进行硬、软件分流结果的细化和修正,以获取其最终分流结果。经实验结果分析可知,所设计的平台具有较高的分流速率和分流准确度,分流效果好。

移动数据分流研究综述

移动数据分流(Mobile Data Offloading)是近年来一个比较新的研究热点。为了解决用户日益增长的移动数据需求给蜂窝网络运营商造成的流量负载和网络拥塞等问题,移动数据分流被提出来,即将蜂窝网络的数据分流到无处不在的用户间本地机会通信。其基本思想是通过蜂窝网络分发数据对象到一部分订阅用户(称为种子用户),再由种子用户通过本地机会通信(如Bluetooth、WiFi Direct、DSRC、Device-to-Device in LTE等)或基于WiFi AP辅助的方式传送给其他订阅的用户。首先从总体上概述了当前对数据分流研究的背景、意义和具体的研究进展。然后针对当前国内外学术界对这方面的研究内容和趋势,按照形式和技术路线对数据分流的方案进行了归类,并对各种类型的分流方案进行了综述。最后结合现实环境进行总结。

基于数据分流实现高速网入侵检测的研究与实践

随着以太网的发展,目前基于网络的入侵检测系统已经无法适应高速增长的网络速度,提出了一种数据分流的方法,将捕获的网络数据按某种规则分流转发至多个检测设备进行处理,以达到提高整个系统的检测性能,解决高速网络下网络入侵检测设备因性能缺陷而带来的丢包问题。

利用数据分流实现高速网下入侵检测的研究与实现

介绍了一种数据分流的方法,将整个网络流量按照某种规则分割成若干部分并转发至不同的检测设备,从而提高整个系统的检测性能。

基于D2D通信的蜂窝数据分流补偿机制设计

设备到设备(device to device,D2D)通信允许邻近用户使用蜂窝网络频段直接通信,既能分流部分蜂窝数据,减轻基站负担,又能提升服务质量。但由于信息不对称,蜂窝网络不知道用户的类型参数,无法准确提供合理补偿,以激励用户参与数据分流。基于契约理论设计了一种分流补偿机制,首先设计蜂窝网络收益函数和分流用户代价函数及其二者的效用;然后基于用户类型参数服从均匀分布设计补偿机制,验证了该机制能满足个人理性和激励相容条件,分析了该机制的最优性能;最后与正比例补偿机制和完全信息补偿机制进行对比仿真,结果表明,本文设计的分流补偿机制既能保证用户愿意参与数据分流,也鼓励用户报告自身真实的类型参数,还能获得接近于完全信息补偿机制下的效用和性能。

云计算平台下的大数据分流系统的设计与优化

设计云计算平台下的大数据分流系统,实现优化数据聚类和模式识别。传统的云计算平台下的大数据分流系统采用的是开源码Linux嵌入式系统设计方法,分流系统通过耦合线圈连接到云计算平台的交换机中,导致分流系统中的数据出现漏分和错分。提出基于功能子程序动态加载和Tiny OS优先级调度的云计算平台下大数据分流系统优化设计方法。设计的云计算平台下大数据分流模块主要包括控制器模块、电源管理模块、数据存储器模块、传输通信模块、以太网模块和显示模块。采用Tiny OS优先级调度方法进行大数据信息流的特征采集和调度,得到大数据分流系统主控制器的芯片接口电路图和串口通信电路图。选用MBM29LV400BC作为片选和读、写信号的地址线,将大数据从12位的A/D结果转换成16位,最后在Linux操作系统中采用功能子程序动态加载方法进行系统的软件开发,实现系统优化设计。仿真结果表明,采用该系统能有效实现对云计算平台中的大数据分流,准确度高,性能优越。

无线传感器网络Agent数据分流策略

移动Agent(mobile agents,简称MA)技术在无线传感器网络的异常事件监测中广泛应用.基于异常事件的性质,数据中心(即sink点)派出实现特定功能的MA到异常目标位置附近收集传感器节点(数据源节点)的感应监测数据.与传统的客户端-服务器传输模型不同,MA技术往往能够对收集到的感应数据进行压缩和融合,从而大大减少了在网络中传播的数据流量,降低了数据传输的能量消耗.通常情况下,MA经过的源节点越多,其收集的数据量越大.通过对目前已有的MA行程规划算法进行研究,提出了实现Agent数据分流的传输技术.该技术基于分流规则,决定是否提前把MA已收集到的数据传回sink,而不携带数据的MA继续访问余下的传感器节点.该Agent数据分流技术解决了由于MA携带大量数据访问源节点而造成的源节点能量消耗过快的问题,适用性强.大多数目前常用的MA行程规划算法都可以采用该技术来提高性能.Agent数据分流的最终目标是减少源节点传输的数据量,尽可能地延长源节点的工作寿命,从而更长时间地实现对异常目标的监控.

边缘计算中基于马尔可夫决策过程的数据分流时间优化

随着物联网的发展,大规模的数据传输增大了网络负载和数据分流时间.为了优化数据分流时间,本文在边缘计算的环境中,提出基于马尔可夫决策过程(MDP)的分流节点选择策略.本文首先构建一个支持蜂窝和WiFi通信的网络模型,该模型由终端设备、分流节点和中心云构成,然后通过终端设备的位置和上传数据量的大小构建马尔可夫决策过程模型,最后,运用值迭代算法求解马尔可夫决策过程模型,得到最优分流节点选择策略,达到优化数据分流时间的效果.本文采用两组对比实验,大量实验结果表明本文所提策略在传输数据的同时,其数据分流时间比基准算法更短.

无线传感器网络Agent数据分流策略

移动Agent(mobile agents,简称MA)技术在无线传感器网络的异常事件监测中广泛应用.基于异常事件的性质,数据中心(即sink点)派出实现特定功能的MA到异常目标位置附近收集传感器节点(数据源节点)的感应监测数据.与传统的客户端-服务器传输模型不同,MA技术往往能够对收集到的感应数据进行压缩和融合,从而大大减少了在网络中传播的数据流量,降低了数据传输的能量消耗.通常情况下,MA经过的源节点越多,其收集的数据量越大.通过对目前已有的MA行程规划算法进行研究,提出了实现Agent数据分流的传输技术.该技术基于分流规则,决定是否提前把MA已收集到的数据传回sink,而不携带数据的MA继续访问余下的传感器节点.该Agent数据分流技术解决了由于MA携带大量数据访问源节点而造成的源节点能量消耗过快的问题,适用性强.大多数目前常用的MA行程规划算法都可以采用该技术来提高性能.Agent数据分流的最终目标是减少源节点传输的数据量,尽可能地延长源节点的工作寿命,从而更长时间地实现对异常目标的监控.

异构无线网络中基于能量感知和资源分配的数据分流方法

针对因移动数据流量的大规模增长而导致通信网络能耗增加的问题,提出一种基于能量感知的数据分流方法。首先,建立能量感知的数据分流模型,通过用户对网络的选择,以及子信道和功率的分配,建立了能量感知和资源分配的算法。目的是设计一种在保持网络稳定的同时最大限度地减少预期时间平均功耗的在线网络选择和资源分配的算法。最后,仿真实验结果表明该方法在异构网络数据切换分流时,能有效降低用户的平均功耗,较好地解决大型网络系统中存在的多个蜂窝和Wi-Fi网络以及多个用户情况下的数据分流问题,并且用户能量平均功率从67 W下降到24.8 W。

高速环境下基于数据分流的入侵检测系统设计

提出了一种数据分流的方法,将捕获的网络数据包按某种策略分流转发至多个检测设备进行处理,提高了在高速网络环境下检测系统的性能,解决了硬件发展跟不上网速发展而带来的漏报率高的问题。

一种用于并行入侵检测系统的数据分流策略

流量分配是影响并行入侵检测系统实时性的重要因素。提出了一种数据分流策略,将捕获的网络数据按照某种分流策略转发到多个探测器进行处理,解决目前基于网络的入侵检测系统跟不上高速网络发展而带来的丢包问题,达到提高整个系统的检测性能。最后通过试验分析表明该策略是有效的。

室外WLAN数据分流WOB工程实施模式探讨

文章分析了室外WLAN与基站共址建设中天馈系统安装方案、AP设备安装与取电方案、传输方案、覆盖区域及站点选择方案,并从数据分流和工程实施效果方面进行了成功案例分析,提出了WOB室外数据业务分流的工程实施新模式。

基于数据分流的并行入侵检测系统研究

随着网络时代的不断发展,以往集中入侵检测体系存在一定的不足,相关人员在检测过程中会出现数据不完整的情况,从而对准确性产生一定的影响。对此,本篇文章主要对数据分流的并行入侵检测系统进行合理分析,进而结合实际情况提出相关建议,仅供参考。

基于公交车缓存机制的移动数据分流研究

为了应对爆炸式增长的车辆流量数据和用户日益增长的应用程序需求给蜂窝网络运营商(如3G/LTE)造成的巨大的流量负载和网络拥塞等问题,当前已有很多工作提出将数据通过高容量的用户设备间通信进行分流。通过蜂窝网络分发数据对象到一部分订阅用户(称为种子用户),由种子用户通过本地机会通信的方式传送给其他订阅用户。为了最大化分流的效率,大多数的工作根据分流的对象和意义,提出了多种分流的方案,但是这些工作大都关注于种子用户的选择问题上。为了研究数据的缓存分配对分流的影响,着眼于城区VANET环境下的数据分流,根据城区多种数据异构的特性,提出利用公交车作为种子用户,通过制定数据缓存分配方案来间接完成数据分流的方案。缓存方案越好,用户命中自己想要的数据的概率就越大,分流的数据量就越多。据此,相应制定出几种贪心的缓存方案,一种启发式方案。通过大量的实验验证了启发式分配方案在分流数据量较多的情况下的优势,同时指出影响数据分流效率的几个重要参数。

基于机会通信的移动数据分流算法研究

近年来移动智能终端设备数量迅猛增长,移动数据流量的消耗也随之呈现指数增长趋势。数据流量激增使蜂窝网难以提供充足的带宽来满足用户需求。为解决此问题,移动数据分流技术应运而生。利用设备间的机会通信,提出一种结合用户活跃度和位置信息的移动数据分流算法(Social Activity and Geographic Location Awareness Off loading Protocol,SAGLA)。根据用户的活跃度选取发布用户,利用订阅用户与发布用户的位置关系做出消息分发决策。理论分析和仿真结果表明,该算法可以实现较高的移动数据分流效率和较短的等待时间。

浅谈国家1∶50000数据库更新数据分流方案

国家1∶50 000数据库更新工程是一项涉及多个工序技术比较复杂的工程,前期数据的预处理至关重要,特别是前期数据的分流整合,结合工作实践,介绍一种数据分流方案,该方案具有简洁、高效、数据损失小等特点,在生产中取得很好效果。

校园网数据分流实现方法及比较

长期以来,我校校园网经由CERNET(国家教育科研网)唯一出口,由于CERNET出国访问计费昂贵,导致校园网每月网费居高不下。通过设计校园网多出口路由,实现数据分流,减少经由CERNET的国际流量,并在多出口部署网络防火安全策略,有效地在保证网络畅通的前提下节约大量网络费用,减轻网络负荷,并有效保障网络安全。本文介绍了我校校园网基于硬件路由和基于软路由完成数据分流的两种实现方法。