桥梁健康监测数据的质量评估方法研究

桥梁健康监测数据的挖掘和分析工作只有在整体数据质量符合基本要求的有效数据基础上进行,才能保障如模态参数识别、损伤识别和状态评估等后续工作的准确性。因此,基于量化改进的探索性分析方法(Exploratory Data Analysis,EDA)和相关性分析从数据完整性、准确性和一致性的角度建立了桥梁健康监测静、动态数据的质量评估方法。对某大跨度斜拉桥健康监测系统的静、动态数据进行质量评估,通过对比分析了不同评估质量的温度数据、静挠度数据和不同评估质量的主梁竖向加速度动力信号的模态参数识别的稳定图,验证了所提方法的正确性。结果表明,所提评估方法能够快速有效地判断数据质量的好坏,进而确保桥梁结构的服役性能评估和预测的准确性,有利于提高健康监测数据的可用性和效能。

中国海洋环境数据及其资产价值评估体系的现状

海洋环境数据是人类认识海洋、保护和开发利用海洋的重要战略资源。随着数字经济和科学技术的迅猛发展,海洋环境数据成为新的重要的生产要素。海洋环境数据资产作为一种新的资产形式,如何对其进行价值评估成为一个新的难题。通过对国内海洋数据资产价值评估的深入调查和研究,得出传统的成本法和收益法及其二者组合的方法是目前海洋环境数据价值评估的基础,发现新时期海洋环境数据的价值评估的方法具有复杂性、灵活性和多维度等的评价方式,对海洋经济发展和海洋科学研究可持续性具有非常重要的经济价值。

基于EDA统计图量化的桥梁动态监测数据质量评估

探索性数据分析统计图在桥梁健康监测动态数据质量评估中已有广泛应用。为了减少人工观察统计图的主观性,通过近似度量方法实现统计图的量化分析,得到多个指标对监测数据进行快速质量评估。在运营环境激励作用下,桥梁结构动力响应具有短时线性平稳性,近似服从正态分布。以某大跨斜拉桥振动数据为研究对象,首先,绘制样本数据直方图和Q-Q图,通过观察数据分布特征预先判断数据质量,确定优、良和差3个等级。然后,分别通过KL散度和余弦相似度2种近似度量方法对样本数据直方图和Q-Q图进行量化,得到数据服从正态分布程度的指标;通过箱线图检测样本数据全局异常点,得到正常数据占比;统计分析得到量化值和先验质量等级的对应关系,确定以直方图KL散度和余弦相似度为主、以箱线图正常数据占比为辅的数据质量评估标准。最后,取部分数据为验证集,进一步验证所提方法各个指标的合理性,并给出该方法在实际工程上的应用结果。

基于组合赋权法和模糊综合评价的电力设备状态数据质量评估

随着电力网络的扩大以及工业信息化的迅速发展,在电力领域中采集和待处理的数据量呈现爆发式增长,数据的丢失、冗余、异常、冲突等问题也日益突出,影响数据的质量。数据质量评估作为保证数据质量的关键一环,发挥着重要作用。针对电力设备的状态数据提出一种数据质量评估方法,选择完整性、准确性、唯一性、一致性、及时性5个评估指标构建数据质量评估体系,设置了定量计算的评估规则;组合运用模糊层次分析法和熵权法来确定各评估维度的权重,以提高数据质量评估的科学性;再运用模糊综合评价法,依据隶属函数来确定数据质量的所属等级。最后运用上述方法,对某地的油色谱数据质量进行评估,该方法计算得到数据质量的评分为77.15,处于“中等”等级。评估结果与实际应用场景相符,表明该文提出的方法适用于电力设备状态数据质量评估。

基于扎根理论的数据合规评估指标体系构建及应用

数据合规是企业实现数据资产价值的关键因素,如何评估企业数据合规水平成为亟待解决的问题。在文献回顾的基础上,运用扎根理论,选择被问询的IPO企业作为样本建立合规评估点,构建包括8项一级指标、16项二级指标、70项三级指标在内的数据合规评估指标体系,对华大基因的数据合规情况进行效果检验,验证指标体系的合理性。研究为数字经济时代企业数据合规管理实践提供了理论支持,并为数据合规研究提供了参考。

大学生商务数据分析能力评估系统的设计与实现

随着电子商务行业的迅速发展,数据分析成了企业竞争力的关键。然而,当前针对电商专业的大学生在商务数据分析能力方面的评估系统仍有待完善。本研究旨在设计与实现一个大学生商务数据分析能力评估系统,并采用分层式、模块化架构设计,将现代信息技术与数据挖掘技术相结合,以准确分析和评价大学生的商务数据分析能力,为相关专业的教学改革和个性化教学提供数据支持,在提升学生的数据分析技能的同时,促进专业人才的培养,满足企业的用人需求。

风云三号微波温度计长序列再定标历史数据集质量评估

以METOP-A、Suomi-NPP历史资料作为参照,系统分析比较了2008—2020年4颗风云三号卫星的微波温度计(Microwave Temperature Sounder, MWTS)再定标历史资料质量。结果表明,4颗卫星的MWTS探测性能稳步上升,再定标数据集有效消除了遥感仪器在轨期间数据异常跳变、寿命期内遥感仪器辐射响应衰变、不同卫星间的辐射定标差异等因素影响,大幅提升了MWTS历史数据集的准确性和均匀性,使得再定标后的对流层和平流层通道数据与国外同类型仪器数据偏差在±0.1 K范围内。本文还重点分析比较了对流层中高层和平流层低层两个探测通道,结果表明FY-3D MWTS再定标数据和美国NOAA卫星应用研究中心STAR长序列数据集针对中高层大气的表现类似,平均亮温在时间变化和空间分布具有相似的特征,月均全球高空亮温年变化趋势差异最大为0.002 4。因此,2020年之后的FY-3D再定标数据,可以接续STAR长序列数据集,用于中高层大气的温度变化检测与分析。

工业多元时序数据质量评估方法

现有的数据质量评估(DQA)方法通常只从特定数据质量维度(DQD)的基本概念分析,忽略了能够反映数据质量(DQ)关键信息的细粒度的子维度对评估结果的影响。针对上述问题,提出一种工业多元时序数据质量评估(IMTSDQA)方法。首先,对于待评估的DQD,如完整性、规范性、一致性、唯一性和准确性等进行细粒度划分,考虑同一DQD内或不同DQD间各子维度的相关性以确定这些子维度的度量;其次,对完整性的属性完整性、记录完整性、数值完整性,规范性的类型规范性、精度规范性,一致性的顺序一致性、逻辑一致性,唯一性的属性唯一性、记录唯一性,准确性的范围准确性、数值准确性等子维度进行权重分配,进而充分挖掘DQD的深层次信息,从而获得反映DQ详情的评估结果。实验结果表明,与现有的基于框架定性分析、依据DQD基本定义构建模型的方法相比,IMTSDQA能更详细、更全面地评估DQ,且不同DQD的评估结果更能客观准确地反映DQ问题。

重要数据出境安全评估制度的偏离与修正

数据分类分级保护制度下,重要数据是内蕴国家安全与公共利益的数据类型。数据出境监管规则体系中,安全评估的功能定位系防范整体安全风险。而我国重要数据出境安全评估制度却偏离了聚焦整体安全的理念,侧重于关注个体安全。这易使数据出境监管滑向过度规制,不利于数据的流通与利用,因而亟须修正。首先,《数据出境安全评估办法》多处采取关注个体安全的法条表述应被修改。其次,个人信息集群型重要数据的安全评估门槛过低,应适当提升,并从国家安全层面界定个人信息敏感性。再次,殷鉴欧盟充分性认定的“中国版充分性认定”仍难适用于重要数据的出境监管,理应摒弃“实质等同”逻辑并进一步细化考量因素。最后,标准合同条款在重要数据出境场景下存在适用障碍,应专门制定针对性的重要数据出境示范合同条款,与适用于小规模个人信息出境的标准合同条款并列,使数据出境监管规则体系更适恰于数据出境监管实践需要。

动态调查的自适应设计及数据质量评估

网络调查数据的海量涌入使得传统抽样调查的响应率显著下降,但网络样本的数据质量及可推断性受到质疑,而自适应抽样调查设计作为一种提高数据质量的有效手段,在网络调查实践中逐渐兴起。因此,在回顾和比较现有文献的基础上,系统介绍R统计量和偏R统计量的构建原理和估计方法,深入探讨它们在自适应调查设计中的关键作用,并设计数值模拟展示R统计量和偏R统计量的应用过程,验证其在提高数据采集效率和质量控制方面的实际效果。研究结果表明,在目标样本的辅助变量信息可用时,利用R统计量和偏R统计量指导自适应调查的数据收集过程,可以显著提升响应样本的代表性和估计的准确性,大幅度提升网络样本的可推断性和未来样本融合的效率。

甘肃省区域自动气象站数据质量评估应用程序研究

文章利用python编程语言开发了一款对甘肃省区域自动气象站质控疑误数据自动统计分析应用程序,能够自动链接甘肃省气象资料业务系统(MDOS)区域自动站后台数据库,对全年各月质控出的全省区域自动站疑误数据进行分站点、分要素、分疑误类型的筛选、分析,快速自动生成EXCEL统计图形和表格,自动生成WORD格式的甘肃省区域站逐月数据质量分析报告模板;程序的业务应用对提高区域站设备运行的可靠性和数据可用性具有重要意义。

基于支持向量机DE算法的输变电工程数据特征提取与评估

输变电工程数据繁杂,为提高数据特征提取与评估水平,本文提出基于支持向量机DE算法的模型。通过对支持向量机和DE算法应用原理的了解,明确各自应用特点,采用支持向量机DE算法的综合型方案提取输变电工程数据并做出评估,输入变量采用k-means聚类算法的数据特征子集,在确定SVM核心参数后,通过DE算法进行优化,建立覆盖面广、结果准确的DE-SVM评估模型。结合实例,研究该模型在工程数据预测与评估中的应用效果,结果表明平均误差均在6%以内,精度高,应用效果优于BP神经网络和未优化的SVM算法,可推广基于支持向量机DE算法的DE-SVM模型,准确预测和评估输变电工程数据,为工程造价管控提供依据。

水质分析数据质量监控和评估系统运用分析

水质分析质量监控和评估,有助于改善水环境问题,而传统水质监测数据处理和评价方法,尚存在诸多方面的不足,具体表现为数据处理效率低下,评价结果准确性低等。为提升水质数据管控效率,推进水质分析管理规范化发展,本文首先介绍水质数据处理方法,之后,通过结合实例的方式,设计水质分析数据处理及评价系统,并以多个功能模块为出发点,对系统实现路径进行分析。希望通过本文研究,为相关行业提供借鉴。

大数据环境下数据资产价值评估模型

本研究旨在开发一种适用于大数据环境下的数据资产价值评估模型,以帮助企业准确评估其数据资产的价值。研究 采用了结合层次分析法(AHP)和灰色关联分析法(GRA)的方法,用以量化和评估数据资产的价值影响因素,并确定与被评估资 产关联度最高的可比数据资产。通过对五个关联度最高的数据资产进行市场比较法修正,计算了各可比数据资产的权重,并构建了 数据资产价值的评估模型。结果显示,该模型能够有效地缩小由于评估因素差异性带来的误差,提供了一个相对准确的数据资产市 场价值。

企业数据资产价值评估——以吉利汽车为例

在汽车企业转型升级的关键时期,数据资产作为新兴的生产要素,正在发挥日益重要的作用。本文首先对数据资产的概念界定与评估方法的国内外相关文献研究进行回顾;其次,以吉利汽车为例,利用实物期权法中的Schwartz-moon模型,通过割差法的思想倒挤出企业数据资产的价值,为量化数据资产提供新的观点与解决方法,为汽车生产企业数据资产价值评估的模型构建和案例应用提供借鉴与参考。

基于深度学习的文本大数据质量评估与提升方法探究

大数据质量是实现大数据治理的基础和前提,可在一定程度上影响大数据的价值和效益。如何评估和提升大数据质量,避免错误、缺失、噪声等质量问题是一个亟待解决的重要问题。基于此,文章提出了一种基于深度学习的大数据质量评估与提升方法。该方法可利用深度神经网络对大数据进行特征提取、异常检测、缺失值填充、噪声消除和质量评分等操作,从而有效提高大数据的质量水平和可用性。此外,文章通过基准方法或最新方法对该方法进行了比较和分析。

基于DSMM的数据安全评估方案设计研究

在数字化的世界里,数据成为推动经济社会发展的重要引擎。然而,随着数据量的激增,数据安全问题也愈发凸显。为有效评估和提升数据安全水平,文章基于数据安全能力成熟度模型标准提出数据安全评估方案设计,通过对组织的数据安全进行有效性评估,可以全面了解数据安全现状,调整优化数据安全策略,提升数据安全治理水平。

基于信息化技术的统计数据质量评估体系构建研究

随着现阶段信息技术的飞速发展,信息技术的应用为统计工作提供了更多的便利,但立足于信息时代背景下,受海量数据的冲击,统计数据质量问题也逐渐凸显。保证统计数据的完整性、一致性、时效性、可靠性,已经成为现阶段统计工作所要考量的重要问题。因此,利用数据挖掘、人工智能、大数据分析技术,保证统计工作中数据的全面性,以此发现数据中可能存在的诸多问题和漏洞,从而及时解决问题,不仅可以构建较为完善的数据质量评估体系,还可以满足新时期数据统计工作的本质要求。本文基于信息化技术的统计数据质量评估体系的构建展开分析和论述。

《电信领域数据安全风险评估规范》浅析与实践

《电信领域数据安全风险评估规范》是电信行业数据安全领域的重要指导性文件,它详细规定了数据安全风险评估的原则、流程、方法及工具等要求,为电信领域处理者围绕数据处理活动开展数据安全风险评估提供了重要参考。本文介绍了相关背景和法律法规要求,强调了数据安全风险评估的必要性和重要性,从评估准备、评估实施等方面详细阐述了数据安全风险评估的流程和要点。其中,评估准备包括组建评估团队、确定评估范围和制定评估方案等步骤;评估实施包括数据处理活动分析、合规性评估和安全风险分析等内容。通过实际项目案例,进一步说明了数据安全风险评估的实践经验和注意事项。

我国发布13种矿产资源全球储量评估数据

自然资源部中国地质调查局发布的《全球矿产资源储量评估报告2023》中新增铁、锰、铬、铜、铝、铅、锌、磷8种矿产,并更新了锂、钴、镍、锡、钾盐5种矿产数据,全面客观地评估了截至2021年底全球13种矿产资源储量信息。