实时数据流技术在电力系统中的研究与标签应用

随着电力系统的智能化、数字化和分布式化发展,实时数据流在电力系统中的应用逐渐增多,尤其在智能电网领域。本文深入研究了电网中的实时数据流技术,并探讨了标签在此领域的应用,以提高数据处理、监控和优化的效率。

基于GNSS实时数据流的载波相位差分测速方法及精度评估

为了满足地质灾害实时高精度监测应用需求,对常规全球卫星导航系统(GNSS)载波相位差分测速事后处理软件进行改进,增加了实时数据流接收和实时解码国际海运事业无线电技术委员会(RTCM)的功能,实现了真正的GNSS载波相位差分测速.利用静态站和振动台模拟正弦波振动实验的GNSS数据,评估改进后GNSS实时测速程序的精度.静态模拟动态的测速精度误差均方根(RMS)优于5 mm/s;振动台动态实验解算结果与振动台输出真值的互差RMS为10.4 mm/s.说明本实验的实时GNSS测速程序在静态实时测速条件下的测速精度可达到mm/s级,在实时动态条件下测速精度仍能达到cm/s级.

基于工厂信息的实时数据流分析与全过程质量监控

针对某钢铁企业生产过程中的生产信息不畅通、产品质量无法追踪问题,开展了基于工厂信息(PI)的实时数据流分析与全过程质量监控方法的研究。着重研究了实时数据流分割和过程监控,提出基于统计质量控制(SQC)图和工序性能指标的统计监控方法,并开发了一个产品技术质量监控系统,应用结果表明基于PI的实时数据流分析与产品质量监控实现了企业对生产工序质量的监控,以及关键生产工艺的识别与改进。

面向实时数据流的差分隐私直方图发布技术

差分隐私作为当前有效的隐私保护机制之一,得到广泛的应用。目前已有多种算法用来生成满足差分隐私的静态直方图,但针对实时数据流环境下的直方图的发布方法却很少,且没有较好地均衡噪声误差和数据可用性。针对实时数据流实时性高、连续性强、以及数据规模大等特点,文中提出了面向数据流的差分隐私直方图发布方法 DDHP(Histogram Publication of Dynamic Data),该方法基于滑动窗口模型实时处理新到达数据,并采用距离测度的方法衡量相邻两个时间戳的数据相似性,以此来动态地分配隐私预算。通过比较L1、余弦、马氏距离在真实数据集上的应用的有效性,选择最优测度。DDHP采用BA(Budget Absorption)机制动态合理分配隐私预算,避免隐私预算过早耗尽或剩余,在提高数据可用性的同时降低了算法的发布误差。实验结果表明,DDHP算法是有效可行的。

实时数据流聚类的研究新进展

实时数据流聚类是目前国际数据库和数据管理领域的新兴研究热点。综述了实时数据流聚类的最新研究进展,在介绍实时数据流聚类的相关理论和常用技术的基础上,对现有各种代表性算法的优势和不足进行了系统地分析,从处理速度、聚类形状、演化分析、高维性及噪声健壮性5个方面对算法的性能进行了比较。探讨了基于聚类的实时数据流演化分析方法及其局限性。最后展望了将来可能的研究方向。

IP网络中实时数据流的流量控制

1.引言近年来,全球Internet以指数的增长速度迅猛发展,成为仅次于电话网的第二大通信基础设施,通信量直逼电话网.音频、视频压缩、实时数据传输技术和网络技术的成熟使在IP网络(Internet、Intranet、LAN)上开展多媒体通信业务成为可能.VoIP技术可以在IP网络上以共享网络带宽的方式提供语音、传真业务,从而拉开了与传统语音业务竞争的序幕.据IDC预测,在往后的2-3年里世界上10%的传真流量将通过互连网;到2002,美国国内以及国际长途电话有11%通过互联网.

Altus强震数据采集器实时数据流解码的实现

从技术开发的角度,阐述Altus强震数据采集器的输出数据接口的通讯方式、二进制包结构及通讯过程,并且分析了实时数据流格式,最后介绍了开发环境的搭建和解码的具体实现。

JOPENS流服务与TDE-324系列地震数据采集器实时数据流接口程序的设计与实现

JOPENS系统是为地震台网中心开发的数据处理软件系统,为使地震台站记录到的实时数据流能接入JOPENS系统处理,必须为数采开发对应的接口程序,用来接收地震台站数采的实时数据流。介绍了JOPENS的流服务与珠海泰德公司生产的TDE-324系列数采实时数据流接口的设计思想与实现过程,并对接口程序进行了故障处理能力试验检测,对接口程序在地震台网实际运行中接收到的数据进行连续率统计分析,据此对接口程序的稳定性、容错能力、断点续传等特性作出了初步评价。JOPENS的流服务器通过该接口获取该型号数采的实时波形数据,并已经在此基础上实现了全国观测数据的实时共享。

实时数据流在钢铁生产过程监控系统中的应用

为了解决现有钢铁企业生产过程中存在的实时控制系统与企业级ERP系统之间的信息孤岛、实时数据保存困难和过程管理粗糙等问题,在基于实时数据流的基础上,设计了钢铁生产过程实时监控系统,并将实时数据与关系型数据结合,实现了工业生产的有效实时监控,使实时数据在过程能力管理领域中得以应用,达到精细和精确化管理,提高了钢铁产品质量,为企业获得了良好的经济效益。

TDE-324CI数据采集器强震实时数据流格式及解码过程浅析

介绍了TDE-324CI数据采集器的软件接口,包括TCP/IP网络数据流通讯协议、命令控制字和网络数据流接口,对实时数据流格式进行了具体的分析和描述,最后通过实例分析了实时数据流解码的实现并列举了程序代码。

基于实时数据流的煤矿监测数据流计算模式分析

结合煤矿的现场实际情况和大数据中流计算框架,提出了基于Spark streaming的煤矿实时数据应用的流计算框架。该计算框架可以高效、快速处理来自于监测监控系统的不同系统、不同接口、不同传输速率的要求,快速地采集和处理监测监控系统的实时数据流,融合处理各业务系统的实时数据。该框架的建立可以使得基于采、掘、机、运、通等内容的矿井整体建立运营管控模型,在矿井生产全过程实现信息可采、过程可视、运行可控的能力,确保生产过程信息的完整性、可靠性、真实性。

基于数字签名的实时数据流认证方法研究

针对实时数据流认证的时效性需求,研究了基于数字签名的实时数据流认证方案。在散列函数和数字签名技术的基础上,根据实时数据流的传输特点,提出了认证窗口的思想,设计了三种实时数据流认证方案,第一种方案由数据包自带认证信息;第二种方案由后数据包带前包认证信息;第三种方案由前数据包带后包认证信息。给出了各方案的认证结构和流程,并进行了仿真分析,分别从传输密度和认证窗口两个方面来研究认证效率,结果表明:在不同的传输密度条件下,各种方案各具优势,因此,应根据实时数据流的传输密度来动态选择认证方案和认证窗口,提高认证效率。

基于实时数据流分析的钢铁产品质量监测

针对钢铁企业生产过程中普遍存在的质量分析和监测问题,开展了基于实时数据流分析的产品质量监测的应用研究。结合实时数据库和关系数据库,设计了具有实时监控以及离线追踪的钢铁生产线实时监控系统。着重研究了实时数据采集和实时数据分析,并提出了基于实时数据流的产品质量监测方法,实现了企业对产品生产线的实时追踪和产品质量的全程跟踪管理。

实时数据流聚类等方法在钢铁质量监控中的应用

实时数据流独特的特点,给传统数据的处理方法带来了很大的挑战,利用聚类方法挖掘其中的有用知识则显得非常有优势。针对某钢铁企业在生产过程中出现的信息不通、产品质量无法跟踪的问题,设计开发一个钢铁产品生产过程实时监控系统。同时结合在仿真数据集上具有良好表现的基于密度维度树的增量式网格聚类算法(IGDDT),对产品工艺实时数据流进行分析。实现了企业对产品质量的实时监控,以及对关键工艺的改进,优化了钢铁产品生产过程和产品管理,有利于提高钢铁产品质量。

一种基于实时数据流的TBF分配方法

在GPRS网络中,合理复用PDCH可以有效提升PDCH承载效率,但PDCH复用度过高,则会影响终端用户感知。文章指出现网信道复用技术方案的不足,提出了基于实时数据流的临时块流PDCH信道预占判决算法,按照该算法进行TBF分配,能够在基本不影响用户感知的前提下,提高PDCH信道的承载效率。

一种基于实时数据流的生产线资源调度和分配方法

针对生产线资源的调度与分配难题,提出了基于实时数据流的生产线资源调度分配模型。该模型利用产品的实时生产进度信息和生产线设备的实时状态信息,结合生产线资源管理信息来进行统计分析,实现资源的合理调度分配。实际生产应用表明,基于该调度模型的生产系统能够合理地进行生产线资源的调度分配,运行稳定,安全可靠。

实时PPP离岸潮位遥测方法与试验

为降低离岸潮位实时遥测成本,提高适用性,提出了基于实时精密单点定位的离岸潮位数据获取与提取方法,利用小型浮标搭载具有实时PPP和远程通讯功能的GNSS接收机进行离岸潮位遥测,原始观测数据经粗差剔除、均值化处理、S-G滤波后,较好地剔除了风、浪、流等引起浮标姿态变化所带来的测量误差。研发了相应软硬件,并在天津港外海进行了试验,测试结果优于±8cm,整体中误差为±3.7cm,满足海洋观测规范要求。相较基于压力式传感器加声学通信的现行数据采集方式,该方法具有建设成本较低、观测方式简单、后期维护方便、产业化前景好等特点,可进一步在实际项目中推广使用。

水文变化语义约束的实时水位观测数据流在线滤波方法

受外界环境和仪器设备等的影响,实时水位观测数据流噪声和数据异常问题突出,严重制约了实时应用效能。针对已有数据清洗方法适应性差,难以根据动态观测数据的变化特征进行动态调整问题,本文提出了一种水文变化语义约束的实时水位观测数据流在线滤波方法:在实时水位观测数据变化特征与水文时空过程动态演变规律之间建立高层语义映射,实现水文变化语义知识约束下的卡尔曼模型参数自适应调整,从而突破传统滤波方法的瓶颈。采用多种降雨情景下的实时水位观测数据进行了试验,证明了该方法结果质量的可靠性。

基于人工智能的实时舆情监管系统设计与研究

流批一体的计算框架为实时舆情监管系统提供了高效处理实时数据流的能力,而先进的人工智能审核算法则赋予系统更为智能的舆情分析能力。随着互联网的普及和社交媒体的兴起,舆情监管成为社会治理中一项极为重要的任务。舆情的传播渠道之多、速度之快、影响之深,使得监管工作变得更为复杂和迫切。为了应对上述需求及挑战,舆情监管系统的设计和研究成为大数据领域的一大热点。传统的舆情监管研究方法存在评估方式表浅和获取信息滞后等缺陷,由于部分待监管媒体并不会对监管机构开放数据,因此,在数据方面,越来越多的系统基于爬虫技术实现对媒体数据的获取。同时,为了追求更加准确且深层次的媒体监管评估,基于指标体系计算的量化评估研判体系成为当前舆情评估的主流。

实时GNSS数据流管理平台的实现及应用

随着互联网技术的发展,利用互联网将观测站的实时GNSS数据高速传输给数据处理中心,可以打破GNSS数据事后处理的传统模式,从而实现GNSS数据的实时处理。对于数据处理中心而言,具备实时GNSS数据流管理功能的软件平台就显得尤为重要。本文主要对自主实现的实时GNSS数据流管理平台软件的实现及应用进行了介绍。该软件采用C/S框架设计,实现后端服务与前端用户界面相分离的效果,可通过网络与观测站建立连接来获取实时GNSS数据流,支持TCP/IP通信协议及NTRIP通信协议,支持解码RTCM3.X、BINEX等多种数据传输格式,能够汇聚分布在各地的观测站的GNSS数据,为后续的数据实时处理工作提供数据支撑,并在我国所发起的国际GNSS监测评估系统建设中得到应用。