期刊文献+
共找到4篇文章
< 1 >
每页显示 20 50 100
海量COMTRADE数据并行解析算法 被引量:5
1
作者 桂勋 姚兰 钱清泉 《电力系统自动化》 EI CSCD 北大核心 2009年第15期62-66,共5页
针对电力系统暂态监测数据向海量化发展的趋势,以及对各种串行编程分析软件造成的计算压力,研究了一种基于多核的、采用流水线设计思想的海量电力系统暂态数据交换通用格式(COMTRADE)数据文件并行解析算法。在面向二进制格式的并行解析... 针对电力系统暂态监测数据向海量化发展的趋势,以及对各种串行编程分析软件造成的计算压力,研究了一种基于多核的、采用流水线设计思想的海量电力系统暂态数据交换通用格式(COMTRADE)数据文件并行解析算法。在面向二进制格式的并行解析算法中,采用了2阶段的流水线步骤:第1阶段为文件读取;第2阶段为多线程解析。在面向美国标准信息交换码(ASCII)格式的并行解析算法中,采用了3阶段的流水线步骤:前2个阶段与二进制格式的并行解析算法一样,第3阶段为块边缘解析,打破了传统的串行文本解析算法。算法通过有效利用以往被忽视的数据文件中的序号信息,大幅提升了并行解析的并行度。试验证明此算法可获得相当高的加速比,并且可随着CPU核数的增加和COMTRADE数据文件的加大获得线性加速比。 展开更多
关键词 海量数据 暂态数据交换通用格式(COMTRADE) 多核 流水线 并行解析 电力系统
下载PDF
基于大数据的用电信息采集系统建设 被引量:16
2
作者 段立 胡文 +3 位作者 夏海燕 张向东 傅宏 王刚 《电力大数据》 2017年第9期1-5,共5页
随着用电信息采集系统在重庆市全范围覆盖的应用推广,海量数据的规模效应给数据交互、数据存储、数据处理分析等应用带来了极大的挑战,亟需有效的数据组织管理技术对用电信息采集系统进行优化。基于大数据技术构建用电信息采集系统,主... 随着用电信息采集系统在重庆市全范围覆盖的应用推广,海量数据的规模效应给数据交互、数据存储、数据处理分析等应用带来了极大的挑战,亟需有效的数据组织管理技术对用电信息采集系统进行优化。基于大数据技术构建用电信息采集系统,主要对前置通信服务层、数据存储层及数据处理分析层进行优化,并以实际应用效果证明此次的系统优化是可行的和高效的。 展开更多
关键词 用电信息采集系统 实时并行解析 一体化数据交互 混合存储架构 数据并行处理
下载PDF
PPP: Towards Parallel Protocol Parsing 被引量:1
3
作者 SHAO Yiyang 《China Communications》 SCIE CSCD 2014年第10期106-116,共11页
Network traffic classification plays an important role and benefits many practical network issues,such as Next-Generation Firewalls(NGFW),Quality of Service(QoS),etc.To face the challenges brought by modern high speed... Network traffic classification plays an important role and benefits many practical network issues,such as Next-Generation Firewalls(NGFW),Quality of Service(QoS),etc.To face the challenges brought by modern high speed networks,many inspiring solutions have been proposed to enhance traffic classification.However,taking many factual network conditions into consideration,e.g.,diversity of network environment,traffic classification methods based on Deep Inspection(DI) technique still occupy the top spot in actual usage.In this paper,we propose a novel classification system employing Deep Inspection technique,aiming to achieve Parallel Protocol Parsing(PPP).We start with an analytical study of the existing popular DI methods,namely,regular expression based methods and protocol parsing based methods.Motivated by their relative merits,we extend traditional protocol parsers to achieve parallel matching,which is the representative merit of regular expression.We build a prototype system,and evaluation results show that significant improvement has been made comparing to existing open-source solutions in terms of both memory usage and throughput. 展开更多
关键词 trafficinspection regularparsingclassification deepexpression PROTOCOL
下载PDF
多通道高通量DNA合成仪控制系统设计与实现 被引量:1
4
作者 梁晓会 黄传伟 +4 位作者 郭剑 熊小江 王晓宁 王桂强 范晓逶 《军事医学》 CAS CSCD 北大核心 2015年第8期571-576,共6页
目的研究一种多通道、高通量DNA合成控制系统,可实现单次96通道寡核苷酸长链的全自动合成。方法该控制系统以松下FP2系列PLC及其外围功能模块为核心,完成合成文件和序列文件的解析执行,以及自动和手动合成操作的过程控制;基于组态软件和... 目的研究一种多通道、高通量DNA合成控制系统,可实现单次96通道寡核苷酸长链的全自动合成。方法该控制系统以松下FP2系列PLC及其外围功能模块为核心,完成合成文件和序列文件的解析执行,以及自动和手动合成操作的过程控制;基于组态软件和VC6.0开发上位机人机交互界面,完成合成过程配置,以及流量校准、位置校准等参数设置,并与主控系统完成数据交互。结果经15万条DNA应用合成及测序,结果表明合成时间达到4 min/cycle,耦合效率为99%,且单体试剂消耗量减少>50%,合成过程配置灵活。结论 DNA合成仪控制系统可同时实现96个独立通道的寡核苷酸长链的合成,为多通道高通量DNA合成提供了一种高效、灵活、可靠的控制方法。 展开更多
关键词 DNA自动合成 多通道高通量 并行解析 PLC 组态软件
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部