公路路基填筑中压实度值异常数据处理研究

为更好地评价路基连续压实质量,采用压实度值CMV作为连续压实质量指标,总结现场数据采集试验方案,从压实度值数据预处理、CMV异常数据修正等方面对公路路基填筑中压实度异常数据处理方法进行研究。研究结果表明:压实度值与碾压遍数成正比,当碾压遍数达到一定数量时,压实度值增长放缓,最终趋于稳定。修正异常值有助于增强压实度值与回弹模量的相关性,并提高目标压实度值的准确度,从而提高公路路基压实质量。

基于小波分析和拉格朗日的交通异常数据处理

针对交通数据采集过程中存在异常数据的情况,提出了基于小波分析和拉格朗日的交通异常数据处理方法。首先对交通数据序列进行小波分解,去噪;然后通过拉依达准则找出异常数据;最后采用拉格朗日插值法对异常数据进行修正。试验结果显示该方法可以简单、有效地判别和修正异常数据,相较于传统的交通异常数据处理方法具有一定的优势。

关于地面气象观测技术规定中部分异常数据处理方法的探析

地面气象观测技术规定(2016版)是对《地面气象观测规范》(2003版)(以下简称《规范》)的补充和解析解答,其作用就是把《规范》未尽事宜及实际操作中出现的各类问题,按照《规范》精神要求做一详细阐述,供业务人员在实际观测中参照执行,为更加准确地维护好气象数据奠定了基础,由于实际操作中问题各异,现根据2016年版地面气象观测技术规定的数据处理进行总结归类,初步探析,供测报人员及相关气象工作者以交流。

综述自动气象站仪器检定及异常数据处理方法

自动气象站现场检定时,容易造成观测数据的异常,为保证台站上传定时数据文件的正确性,需要在仪器检定结束后对异常数据进行处理。本文主要对房山国家气象观测站现场检定前的准备工作,正点观测异常数据处理,以及仪器检定后填写相关备注信息等进行了论述。

芯样混凝土抗压强度异常数据处理对检测结果的影响

本文列举了不同芯样混凝土抗压强度异常数据的处理方法,利用实例对比不同的处理方法对钻芯修正回弹法检测结果的影响,验证异常数据处理方法在实际使用时的实用性。

四川南江竹坝磁铁矿区磁异常数据处理应用效果

文章以四川南江竹坝矿区李子垭磁铁矿床地面高精度磁测的数据处理成果为例,提出利用化极和求取垂向二阶导数的方法,在展示矿体空间赋存状态、缩小探矿范围等方面有一定效果。

南海海底地震仪异常数据的分析和处理

海底地震仪(Ocean Bottom Seismometer,OBS)数据处理至关重要,是获取深部地壳结构的基础与前提.2006年实施OBS2006-2测线时,有2台OBS(OBS03,OBS06)数据出现异常,无法使用.由于海上航次花费巨大,采集到的数据弥足珍贵.本文采用数据格式检查、邻近台站对比分析、重采样等方法,成功地对这2台OBS数据进行了解编处理,得到了这两个台站的综合地震记录剖面;利用上述方法对2011年实施的OBS973-3测线中的异常台站OBS03进行了分析处理,同样得到了OBS03台站的综合地震剖面;通过查看两次海上实验班报发现,OBS2006-2测线之OBS06与OBS973-3测线之OBS03内部Sedis编号相同,为同一台记录仪器,再一次验证上述处理方法正确可行;然后对OBS2006-2测线2个台站进行震相识别与走时拾取后,利用前人纵波速度模型开展了射线追踪与走时模拟.此次对异常OBS数据的重新处理工作,不仅为OBS探测提供了宝贵的数据处理经验,而且将提高OBS2006-2测线地壳结构的可靠性和约束性,具有重要的研究意义.

东海及邻域重力异常数据的分区解析延拓处理

对最新获得的东海120°～130°E、22°-33°N研究区的布格重力异常数据进行了解析延拓处理，采用的方法是分区进行不同延拓高度的解析延拓处理，即从浙闽隆起到东海陆架盆地区，进行上延20km处理；从东海陆坡到琉球弧前盆地区，进行上延10kin处理；从琉球海沟到菲律宾海区，进行上延5km处理。在此基础上获得了综合上延布格重力异常数据，同时利用该数据进行了莫霍面深度的反演，并分析其变化规律。分析结果显示，随着延拓高度的增加，浅部异常压制增大，异常曲线更加圆滑，深部构造特征更加明显，东海布格重力异常自西向东的变化规律更加清晰。经过计算统计，分区计算处理方法可行，所得结果可信。

基于多模型并行集成框架的风电功率异常数据识别

风电机组在实际运行过程中因通信故障或人为因素会产生大量异常数据,对工况评估和出力预测带来较大影响,故需要对风电功率异常数据进行处理。通过分析风电功率数据特征和异常数据产生原因,提出了一种多模型并行集成框架的风电功率异常数据识别方法。该方法采用最近邻隔离方法和局部离群因子方法的构建异常检测模型池,再经并行集成框架进行二次筛选合并,得出最终识别结果。利用单一最近邻隔离方法、局部离群因子方法和顺序集成方法在不同风电场实际数据集上进行对比验证。算例验证结果表明,所提方法能有效识别各类异常数据,提升风功率预测模型精度,具有较强的通用性。

基于异常数据预处理和自适应估计的WSN数据融合算法

针对无线传感器网络(wireless sensor network,WSN)存在节点能量受限、测量精度低、生存期短等问题,提出一种基于异常数据预处理和自适应估计加权融合算法(abnormal data-preprocessing adaptive estimation weighting fusion,ADAEWF)。为了提高算法可靠性,提出了基于异常数据检测、简单多数原则和节点综合支持度函数的数据预处理机制;为了减小测量误差对融合精度的影响,基于分批估计和自适应理论对节点测量值进行自适应估计加权数据融合;然后,建立了WSN仿真模型,并分别获得了ADAEWF、自适应预测加权数据融合算法(adaptive forecast weighting data fusion,AFWDF)和算术平均值法下融合结果的均方误差和网络有效生存期。仿真结果显示:ADAEWF算法融合精度和网络有效生存期均优于AFWDF和算术平均值法,表明ADAEWF算法在提高融合数据有效性、网络有效生存期和融合精度方面具有优越性。

地面气象记录中人工与遥测异常数据的处理方法

介绍地面气象记录中人工站或遥测站出现异常数据时,观测数据相互代替的方法,以及测报系统时钟每天对时和修改时钟应注意的问题。

车辆异常油耗数据分析处理与仿真分析

在为实现对企业车辆油耗数据的全面实时监控的车辆油耗监控系统中,通过引入油耗差值来识别、判断、捕捉异常数据,为使图形显示判断准确,采用小波分析法对于汽车异常油耗数据的降噪。在此过程中,首先对汽车油耗数据的特点进行分析,采用决策树分析法对数据进行分类,并在结果中区分不同类型的异常油耗数据。笔者通过使用Matlab软件进行模拟仿真,结果与常规的方法相比更准确。

基于时序CNN的FPGA数据处理异常点识别研究

数据已经成为信息自动化与智能化的核心,由于数据集中数据的类别不均衡,系统误差和随机误差很容易导致数据产生异常点,因此提出基于时序CNN的FPGA数据处理异常点识别方法。为了保证不同数据关联的有效性,对错误数据中的噪声错误和缺失错误进行对齐处理,使用GloVe方法对原始数据中的数据浅层特征进行提取。在模型训练过程中,为了解决数据梯度爆炸和过度拟合问题,对数据归一化处理,提高网络收敛速度,并采用散度计算输入参数定点化尺度的方法减少计算量、保证精度。最后将CNN算法映射到FPGA中实现硬件加速,FPGA算子图切分按粗粒度切分和细粒度切分进行处理。实验结果表明,所提数据处理异常点识别方法可高效读取数据,能够充分识别数据处理中的异常点,具有较高的准确率和精度。

面向智能立项平台的数据预处理体系研究

为了提高电网科学化和智能化管理水平,安徽省国网公司建立智能立项平台,打通SCADA、PMS和自然灾害监测系统的数据屏障,提供智能化和科学化的立项决策。同时针对智能立项平台,建立其数据预处理体系。首先,利用3-σ方法甄别数据中的异常值,并利用k最邻近算法进行异常值替换和缺失值填充。然后,对多时间尺度数据进行整理完成数据集成,并利用Min-Max归一化实现数据归一化。最后,通过实际电力运行数据检验了体系的有效性。数据预处理体系可以有效提高数据质量和可靠性,提高电网公司数据挖掘的质量。

业务改革后地面测报工作中异常数据的处理

地面气象观测是气象自动化中非常重要的内容,对地面气象观测的质量直接影响到了气象台服务质量的好坏,因此,在地面测报工作中,要不断推动业务改革,调整观测方法,不断推动自动化的全面实现,积极构建与当前气象站自动化相适应的观测工作系统,从而有效提高现代观测的综合效益。本文主要针对地面气象观测业务改革后,地面气象观测工作中存在的问题进行了简单的阐述、分析,并对业务改革后地面测报工作中的异常数据提出了具体的处理措施,以期为将来的地面观测提供参考、借鉴。

一次寒潮冰冻天气自动站维护和异常数据的处理

2016年2月12—14日,烟台市出现寒潮、大风、降温、冰冻天气,其中出现的雨转雪天气和急速降温对当地部分站点的风和能见度等要素的观测带来了很大影响。该文从风、能见度传感装置在设备维护,数据的记录、极值及异常值的处理等方面进行了分析,对提高数据的完整性和可用度以及设备的完善等方面给出了建议。

激光通信传输中图像传输数据异常处理技术研究

激光通信传输中对图像传输数据异常处理技术进行研究,介绍了如何提取通信传输产生的异常数据特征,根据提取的信息对数据进行处理。通过研究可以发现给出的技术具有极强的处理能力,处理耗时短,处理范围广泛,是未来的必然发展方向。

箱线图法在动物卫生数据异常值检验中的运用

阐述箱线图的特点、结构和绘制方法。通过SPSS软件,运用箱线图法检验仔猪价格数据中异常值,从中鉴别出离群值和极端值。探讨异常值的处理方法。

低值磁异常数据综合处理在盖层下寻找铁矿的应用

通过岩、矿石的不同磁性差异和磁测剖面的定量计算,分析盖层下存在磁性体的可能,并得到工程验证,从而对曹家沟区盖层下存在"大栗子式铁矿"的探测进行了有效的探索。

一种电能质量异常数据剔除的有效方法

海量的电能质量数据常存在异常数据,会干扰电能质量数据分析,甚至带来错误的分析结果。为此,提出一种新的电能质量异常数据剔除方法,用于电能质量在线监测数据及测试数据中的异常数据发现。对于电能质量稳态数据,首先是根据各指标的业务取值范围对数据进行初判,找出整体异常数据,分析其数据曲线的斜率变化率,滤除曲线的异常点;其次是根据各数据之间的业务关系对数据进行相互校验,完成电能质量稳态数据的异常剔除。对于电能质量扰动波形数据,采用基于S变换的方法对待筛选数据和异常模板库进行对比,与异常模板库中信号相近的扰动波形,认为是异常数据,从而完成电能质量扰动波形数据的异常剔除。该方法已用于某省级电能质量监测系统中,实践证明该方法有效、可行。