期刊文献+
共找到50篇文章
< 1 2 3 >
每页显示 20 50 100
A Short Review of the Literature on Automatic Data Quality
1
作者 Deepak R. Chandran Vikram Gupta 《Journal of Computer and Communications》 2022年第5期55-73,共19页
Several organizations have migrated to the cloud for better quality in business engagements and security. Data quality is crucial in present-day activities. Information is generated and collected from data representin... Several organizations have migrated to the cloud for better quality in business engagements and security. Data quality is crucial in present-day activities. Information is generated and collected from data representing real-time facts and activities. Poor data quality affects the organizational decision-making policy and customer satisfaction, and influences the organization’s scheme of execution negatively. Data quality also has a massive influence on the accuracy, complexity and efficiency of the machine and deep learning tasks. There are several methods and tools to evaluate data quality to ensure smooth incorporation in model development. The bulk of data quality tools permit the assessment of sources of data only at a certain point in time, and the arrangement and automation are consequently an obligation of the user. In ensuring automatic data quality, several steps are involved in gathering data from different sources and monitoring data quality, and any problems with the data quality must be adequately addressed. There was a gap in the literature as no attempts have been made previously to collate all the advances in different dimensions of automatic data quality. This limited narrative review of existing literature sought to address this gap by correlating different steps and advancements related to the automatic data quality systems. The six crucial data quality dimensions in organizations were discussed, and big data were compared and classified. This review highlights existing data quality models and strategies that can contribute to the development of automatic data quality systems. 展开更多
关键词 data quality MONITORING TOOLKIT dimension ORGANIZATION
下载PDF
工业多元时序数据质量评估方法
2
作者 宋洪涛 于江生 韩启龙 《计算机应用》 CSCD 北大核心 2024年第6期1743-1750,共8页
现有的数据质量评估(DQA)方法通常只从特定数据质量维度(DQD)的基本概念分析,忽略了能够反映数据质量(DQ)关键信息的细粒度的子维度对评估结果的影响。针对上述问题,提出一种工业多元时序数据质量评估(IMTSDQA)方法。首先,对于待评估的D... 现有的数据质量评估(DQA)方法通常只从特定数据质量维度(DQD)的基本概念分析,忽略了能够反映数据质量(DQ)关键信息的细粒度的子维度对评估结果的影响。针对上述问题,提出一种工业多元时序数据质量评估(IMTSDQA)方法。首先,对于待评估的DQD,如完整性、规范性、一致性、唯一性和准确性等进行细粒度划分,考虑同一DQD内或不同DQD间各子维度的相关性以确定这些子维度的度量;其次,对完整性的属性完整性、记录完整性、数值完整性,规范性的类型规范性、精度规范性,一致性的顺序一致性、逻辑一致性,唯一性的属性唯一性、记录唯一性,准确性的范围准确性、数值准确性等子维度进行权重分配,进而充分挖掘DQD的深层次信息,从而获得反映DQ详情的评估结果。实验结果表明,与现有的基于框架定性分析、依据DQD基本定义构建模型的方法相比,IMTSDQA能更详细、更全面地评估DQ,且不同DQD的评估结果更能客观准确地反映DQ问题。 展开更多
关键词 数据质量 多元时序数据 数据质量维度 数据质量评估 相关性
下载PDF
数据质量测量框架研究及领域测量框架构建
3
作者 宋金玉 陈连勇 陈刚 《计算机科学》 CSCD 北大核心 2024年第4期19-27,共9页
为激活数据质量潜能,构建兼顾信息环境与技术实现的数据质量测量框架,以提升数据挖掘和指挥决策的效用,文中从宏观层面和微观层面对现有的通用型、行业型数据质量测量框架进行梳理、研究,对数据质量维度进行“聚类”,得到数据质量维度类... 为激活数据质量潜能,构建兼顾信息环境与技术实现的数据质量测量框架,以提升数据挖掘和指挥决策的效用,文中从宏观层面和微观层面对现有的通用型、行业型数据质量测量框架进行梳理、研究,对数据质量维度进行“聚类”,得到数据质量维度类簇,提取了数据质量维度的两类特性,提出面向具体领域的数据质量测量框架构建准则。基于管理领域工作对数据质量的测量需求,结合构建准则构建了面向管理领域的数据质量测量框架,并明确了框架的数据质量维度、测量指标、测量方法等。 展开更多
关键词 数据质量 数据质量维度 数据质量测量 数据质量测量框架
下载PDF
融合多算法评估中英文知识图谱外延简洁性新方法
4
作者 高巍 江运龙 《吉林大学学报(信息科学版)》 CAS 2024年第2期348-355,共8页
针对目前人们只是从理论上提出了针对知识图谱外延简洁性评估指标,并没有给出针对该指标规范的评估方法及流程问题,对知识图谱外延简洁性评估方法进行了研究,提出了支持中英文混合知识图谱外延简洁性评估的新方法。该方法定义了从总体... 针对目前人们只是从理论上提出了针对知识图谱外延简洁性评估指标,并没有给出针对该指标规范的评估方法及流程问题,对知识图谱外延简洁性评估方法进行了研究,提出了支持中英文混合知识图谱外延简洁性评估的新方法。该方法定义了从总体层面进行分组以及分别对头实体、关系和尾实体进行评估的公式,同时为保障评估的准确性,定义了句子层面的评估公式。最后,将4种评估公式联合,得到了对知识图谱外延简洁性指标进行评估的算法。为验证所提出算法的准确性和性能,利用开放数据集OPEN KG(Knowledge Graph),对提出的算法和相关的算法进行了评估与比对,结果验证了本算法对中英文混合知识图谱简洁性评估方面的准确性、时间效率都具有一定的保障,综合性能高于相关的算法。 展开更多
关键词 数据质量 质量维度 外延简洁性 知识图谱 知识图谱质量评估
下载PDF
基于激光跟踪测量的数字化仿真方法研究
5
作者 高瑞 马宁 +3 位作者 杨春光 边东 裴雨霞 孙茗妍 《机电产品开发与创新》 2024年第1期30-32,共3页
大型结构件零部件数量多、结构复杂、装配质量要求高,出现装配不协调会导致成本高、周期长,因此确保零部件装配质量并能够对存在问题的零部件进行返修与调整是保证结构件总装质量的关键。通过获取整体结构件关键特性外形、尺寸数据,将... 大型结构件零部件数量多、结构复杂、装配质量要求高,出现装配不协调会导致成本高、周期长,因此确保零部件装配质量并能够对存在问题的零部件进行返修与调整是保证结构件总装质量的关键。通过获取整体结构件关键特性外形、尺寸数据,将基于激光跟踪的实测数据拟合在同一个坐标系下,实现结构件虚拟装配,优化零部件之间的间隙、公差等参数,最终输出最优的仿真报告,有效降低结构件返修率、提高装配质量,取得了良好的效果。 展开更多
关键词 装配质量 尺寸数据 激光跟踪 仿真报告 实测数据
下载PDF
川西南页岩气勘探三维地震资料采集质量提升措施 被引量:1
6
作者 段文燊 吴朝容 涂远艮 《石油工业技术监督》 2023年第2期1-6,共6页
针对川西南地区页岩气勘探面临的激发条件变化较大、地表障碍物较多和外界干扰较大等影响三维地震勘探资料采集质量的问题,研究团队经过多年研究与试验,设计了经济适用的细分面元复合模板观测系统,从3个方面针对性制定了质量提升措施。... 针对川西南地区页岩气勘探面临的激发条件变化较大、地表障碍物较多和外界干扰较大等影响三维地震勘探资料采集质量的问题,研究团队经过多年研究与试验,设计了经济适用的细分面元复合模板观测系统,从3个方面针对性制定了质量提升措施。(1)分析影响激发的主要因素,开展全工区系统试验,优化工区不同位置激发参数,确定适宜的炮井井深和炸药用量等措施优化激发参数;(2)确定煤矿、河流、水库、城镇等地表障碍物分布区域,细化观测系统方案,减少丢炮、丟道面积;(3)做实检波器埋置,控制人文和自然环境噪音,提升接收质量。一系列措施落实后,地震资料的采集质量显著提升,所采集的JY三维工区的原始单炮记录一级品率大于90%,PSTM(Pre stack time migration,叠前时间偏移)处理成果剖面具有较高的信噪比、分辨率和较强的层次感,对页岩气勘探开发具有重要支撑作用。 展开更多
关键词 四川盆地 页岩气 三维地震勘探 资料采集 质量提升
下载PDF
大数据背景下金课维度创新与教学质量监测机制建设研究 被引量:1
7
作者 聂琴 《计算机应用文摘》 2023年第1期4-6,共3页
在“互联网+”教育蓬勃发展的过程中,大数据技术与教育教学实现了极为紧密的联系,使得高校围绕教学管理的现实条件整合利用大数据技术宏观精准地了解基本学习以及教学条件,想方设法地提升综合教学管理能力以及工作质量。综合实力较强的... 在“互联网+”教育蓬勃发展的过程中,大数据技术与教育教学实现了极为紧密的联系,使得高校围绕教学管理的现实条件整合利用大数据技术宏观精准地了解基本学习以及教学条件,想方设法地提升综合教学管理能力以及工作质量。综合实力较强的高校,以打造金课为基础,立足于一流课程,积极完善教学质量监测机制。文章从多个视角出发,全面分析不同的金课维度,坚持创新导向,确保学生能够在立体化教学质量监测机制的导向下,发挥自身的特长,实现学校人向社会人的顺利过渡。 展开更多
关键词 大数据背景 金课维度创新 教学质量监测 机制建设
下载PDF
水文数据库数据质量控制与管理应用研究 被引量:11
8
作者 余宇峰 张建新 +1 位作者 朱跃龙 万定生 《水文》 CSCD 北大核心 2013年第3期65-68,共4页
数据质量问题已经成为水文信息化过程成败的重要影响因素。本文以水文数据库为背景,分析了水文数据质量评估关键指标维度、数据质量问题的来源及其分类,建立了水文数据库数据质量评估模型和控制模型,并从实践角度探讨了数据质量控制和... 数据质量问题已经成为水文信息化过程成败的重要影响因素。本文以水文数据库为背景,分析了水文数据质量评估关键指标维度、数据质量问题的来源及其分类,建立了水文数据库数据质量评估模型和控制模型,并从实践角度探讨了数据质量控制和改进的若干方法。 展开更多
关键词 数据质量 维度 质量评估 质量改进
下载PDF
数据质量维度与框架研究综述 被引量:10
9
作者 袁满 刘峰 +1 位作者 曾超 谢兰 《吉林大学学报(信息科学版)》 CAS 2018年第4期444-451,共8页
为了对数据质量维度有一个全面、清析而准确的定义,便于在领域层面达成一致,也为从现存的数据质量管控技术架构中选择出合适的框架提供依据,对数据质量的发展历程和维度以及其管控框架进行了全面的研究。通过研究明确了复杂的数据质量... 为了对数据质量维度有一个全面、清析而准确的定义,便于在领域层面达成一致,也为从现存的数据质量管控技术架构中选择出合适的框架提供依据,对数据质量的发展历程和维度以及其管控框架进行了全面的研究。通过研究明确了复杂的数据质量维度指标,按其名称和定义提供一套比较全面的数据质量规范,并对其质量管控技术框架进行了综合研究与对比。该研究能科学地指导具体应用需求选择合适的数据质量框架和比较全面的数据质量维度实现对数据的评估,同时可节省大量的时间,减少人力和物力支出。 展开更多
关键词 数据 数据质量 数据质量维度 数据质量框架
下载PDF
通用数据质量评估模型及本体实现 被引量:14
10
作者 张晓冉 袁满 《计算机研究与发展》 EI CSCD 北大核心 2018年第6期1333-1344,共12页
随着数据科学技术在各个领域的深度应用,作为企业重要资产的数据越发表现出它的价值性与重要性.绝大多数企业结合行业特点开发了数据质量检测系统来解决自身数据质量问题.这些系统的评估模型各有特点,对于数据质量维度的定义也是各有千... 随着数据科学技术在各个领域的深度应用,作为企业重要资产的数据越发表现出它的价值性与重要性.绝大多数企业结合行业特点开发了数据质量检测系统来解决自身数据质量问题.这些系统的评估模型各有特点,对于数据质量维度的定义也是各有千秋.试图将这些模型与数据质量维度以一种通用的形式来定义,旨在成为企业研发数据质量评估系统的标准.通过分析国内外学者在该研究领域取得的成果并结合常年研发数据质量检测与评估系统的经验,首先,提出了一个通用的数据质量检测与评估的数学模型;接着,以此模型为基础,采用本体技术定义了从该通用的数据质量评估数学模型到本体模型映射的转换规则;随后,考虑到多数数据存储在关系数据库中,因此以关系数据模型为例,依据所提出的数学模型和转换规则实现了对数据质量评估本体的抽取与构建,该模型实现了复杂质量规则的定义,具有规范性,实现了对不同来源、不同格式的数据质量进行检测与评估;最后,结合中国石油的油田开发数据质量评估项目进行了系统的实现,验证所提出模型的正确性、科学性、合理性以及可扩充性等.由于所提出的数据质量检测与评估模型与领域无关,所以它具有通用性. 展开更多
关键词 数据质量 数据质量维度 数据质量评估 关系数据模型 本体映射 数据质量本体模型
下载PDF
基于事实抽取的Web文档内容数据质量评估 被引量:5
11
作者 韩京宇 陈可佳 《计算机科学》 CSCD 北大核心 2014年第11期247-251,255,共6页
Web文档内容数据质量评估决定获取数据的有用性。基于词法或用户交互进行质量评估的方法缺乏通用性,也不能获取内容的事实内涵。因此提出基于事实的质量评估方法(Fact-based Quality Assessment,FQA)。首先在Web上构建目标文档上下文,... Web文档内容数据质量评估决定获取数据的有用性。基于词法或用户交互进行质量评估的方法缺乏通用性,也不能获取内容的事实内涵。因此提出基于事实的质量评估方法(Fact-based Quality Assessment,FQA)。首先在Web上构建目标文档上下文,并抽取Web文档内容的事实;然后分别采用投票和图迭代策略,构建准确性和完整性维度的参照;最后,比对目标文档和维度参照的事实,量化准确性和完整性。该方法不依赖特定特征,基于事实内涵量化数据质量维度,可取得高的评估精度。实验结果证明了FQA方法的优越性。 展开更多
关键词 数据质量 WEB文档 准确性 完整性 质量维度 事实
下载PDF
统计数据质量评估方法研究述评 被引量:32
12
作者 许涤龙 叶少波 《统计与信息论坛》 CSSCI 2011年第7期3-14,共12页
数据质量评估是统计数据质量管理的重要环节。统计数据质量的评估方法有逻辑关系检验法、计量模型分析法、核算数据重估法、统计分布检验法、调查误差评估法以及多维评估法六个类别,在详细讨论其各自的评估过程、适用性及其优缺点的基础... 数据质量评估是统计数据质量管理的重要环节。统计数据质量的评估方法有逻辑关系检验法、计量模型分析法、核算数据重估法、统计分布检验法、调查误差评估法以及多维评估法六个类别,在详细讨论其各自的评估过程、适用性及其优缺点的基础上,按照评估维度和评估方式对各种统计数据质量的评估方法进行再归类,指出评估方法的进一步研究应该围绕计量模型分析法、核算数据重估法中的物量指数重估法、调查误差评估法和多维评估法等方向展开。 展开更多
关键词 数据质量 评估方法 一维评估法 多维评估法 发展方向
下载PDF
数据素养能力指标体系构建及高校师生数据素养能力现状调查与分析 被引量:91
13
作者 隆茜 《图书馆》 CSSCI 北大核心 2015年第12期51-56,62,共7页
文章在调研国内外文献的基础上,构建了数据素养能力评价维度与具体指标体系,并以此调研了高校不同群体(大学教师、博士生、硕士生、本科生)的数据素养能力现状。研究发现不同群体在数据素养能力上具有显著性差异,高校图书馆可通过设置... 文章在调研国内外文献的基础上,构建了数据素养能力评价维度与具体指标体系,并以此调研了高校不同群体(大学教师、博士生、硕士生、本科生)的数据素养能力现状。研究发现不同群体在数据素养能力上具有显著性差异,高校图书馆可通过设置数据馆员岗位、建设数据服务网页及开展差异化的数据素养教育等方式提升高校师生的数据素养能力。 展开更多
关键词 数据素养 能力 维度 评价 指标体系
下载PDF
面向企业信息化的数据质量评估研究 被引量:7
14
作者 黄武锋 郑华 《计算机技术与发展》 2011年第1期185-188,192,共5页
数据质量问题是企业信息化过程中面临的一项重要挑战,但针对数据质量评估的研究还缺乏足够的重视。文中从数据质量定义出发,阐述了数据质量的各个不同维度及其评估指标的确定,在对比分析已有成果的基础上给出了主观、客观两种评估方法,... 数据质量问题是企业信息化过程中面临的一项重要挑战,但针对数据质量评估的研究还缺乏足够的重视。文中从数据质量定义出发,阐述了数据质量的各个不同维度及其评估指标的确定,在对比分析已有成果的基础上给出了主观、客观两种评估方法,通过引入SOA上下文的可重用服务思想,设计了一种数据质量评估的服务框架,基于该框架对输入输出、流程管理、自动化评估等服务进行了阐述,并使用Web Services服务组件的形式实现了所有的功能需求。 展开更多
关键词 企业信息化 数据质量 维度 数据质量评估 SOA
下载PDF
一种基于校准的模型问题域识别方法 被引量:6
15
作者 王路 杜玉越 《山东科技大学学报(自然科学版)》 CAS 2015年第1期42-46,53,共6页
以Petri网作为描述流程模型的形式化方法,利用工作流的四种基本结构描述流程中活动之间的关系;结合流程模型质量维度中的拟合度、简化度、精确度和泛化度,给出了流程模型中执行序列与事件日志中迹的校准方法。通过所提出的校准动作序列... 以Petri网作为描述流程模型的形式化方法,利用工作流的四种基本结构描述流程中活动之间的关系;结合流程模型质量维度中的拟合度、简化度、精确度和泛化度,给出了流程模型中执行序列与事件日志中迹的校准方法。通过所提出的校准动作序列与流程模型的映射方法,可以识别流程模型的问题域。通过网上购物的实例验证了方法的有效性和实用性。 展开更多
关键词 PETRI网 流程模型 质量维度 校准 动作映射 大数据
下载PDF
基于约束的数据质量评估算法研究 被引量:11
16
作者 梁吉胜 李天阳 +2 位作者 王惠霞 杨锐 张旭东 《科学技术与工程》 北大核心 2012年第3期551-554,共4页
随着信息技术快速的发展与信息系统应用的加深,企业积累了大量的历史数据,支撑企业正常运营与决策。为了使决策更加正确、有效,需要对历史数据进行有效的数据质量评估,并基于评估结果进行数据清洗。重点研究了基于数据维度下数据质量约... 随着信息技术快速的发展与信息系统应用的加深,企业积累了大量的历史数据,支撑企业正常运营与决策。为了使决策更加正确、有效,需要对历史数据进行有效的数据质量评估,并基于评估结果进行数据清洗。重点研究了基于数据维度下数据质量约束的数据质量评估方法,确定数据质量评估维度,并定义了各维度下的数据质量约束,并基于约束给出数据质量评估算法。方法在大庆油田生产数据库数据质量评估项目与河北汉光重工有限责任公司财务系统数据库数据质量评估项目中得到了应用。 展开更多
关键词 数据质量 约束 评估算法 数据维度
下载PDF
三种国际统计质量管理框架的比较及启示 被引量:6
17
作者 程开明 《统计研究》 CSSCI 北大核心 2011年第4期74-79,共6页
本文立足于数据质量管理的现实需要,对国际货币基金组织、欧盟统计局及经合组织的统计质量管理框架进行了比较分析。结果表明,三大国际组织的统计质量管理框架作为保证统计数据质量的有效手段,在质量维度与含义、整体框架、评估方法与... 本文立足于数据质量管理的现实需要,对国际货币基金组织、欧盟统计局及经合组织的统计质量管理框架进行了比较分析。结果表明,三大国际组织的统计质量管理框架作为保证统计数据质量的有效手段,在质量维度与含义、整体框架、评估方法与工具等方面既存在明显差异又具有一致性。它们在统计质量管理方面的做法和经验对于我国加强统计数据质量管理具有借鉴意义。 展开更多
关键词 统计数据质量 质量管理 质量维度 整体框架 评估
下载PDF
一种支持数据质量评价的方法与应用研究 被引量:15
18
作者 宋俊典 刘丰源 《计算机应用与软件》 北大核心 2018年第5期328-333,共6页
为提升数据质量,实现数据有重点的清洁,通过提出一种面向多维度数据质量的模糊综合评价方法,可有效辅助企业明确数据质量的等级分布,有助于企业对数据质量的改进。通过文献调研,基于现有数据质量评价指标体系研究成果构建适合的数据质... 为提升数据质量,实现数据有重点的清洁,通过提出一种面向多维度数据质量的模糊综合评价方法,可有效辅助企业明确数据质量的等级分布,有助于企业对数据质量的改进。通过文献调研,基于现有数据质量评价指标体系研究成果构建适合的数据质量指标体系,确定评价指标集并建立四级评语集。采用德尔菲法和层次分析法确定权重集,确定隶属度函数和特征向量,并进行模糊转换和模糊计算,最终根据最大隶属度原则得到质量评级。以某项目中真实数据为例进行实例验证,基于本方法实现的系统得到的数据质量评价结果与市面上某主流数据质量管理软件评估结果一致性达90%以上,验证了本方法可以为数据质量的评估提供更为全面的评价维度,并保证一定的准确性和可靠性。 展开更多
关键词 数据质量评估 多维度 质量指标体系 模糊综合评价法
下载PDF
一种面向闭环的数据治理平台与方法设计 被引量:2
19
作者 张国宝 卞艺杰 《计算机技术与发展》 2019年第8期156-160,共5页
数据孤岛现象在高校普遍存在,数据治理的目的是解决高校存在的数据源分散异构、数据质量不高等问题。文中对数据治理的方法论和数据平台的功能设计进行研究探讨。研究了数据质量、数据质量维度和数据质量治理相关概念,结合PDCA系统循环... 数据孤岛现象在高校普遍存在,数据治理的目的是解决高校存在的数据源分散异构、数据质量不高等问题。文中对数据治理的方法论和数据平台的功能设计进行研究探讨。研究了数据质量、数据质量维度和数据质量治理相关概念,结合PDCA系统循环理论,提出了闭环数据治理体系的原则和治理的四个维度,即技术维度、业务维度、演化维度、管理维度。设计了符合高校遗留系统环境下的闭环数据治理体系架构和数据归集、对标、提质、共享、服务的治理活动过程,并且给出了数据治理平台的功能设计,在主数据管理、数据质量检测等方面实现可视化管理。通过设计的数据治理平台的实际案例的应用,以及相关关键技术的分析,结果说明平台在数据治理方面是有效的。 展开更多
关键词 数据质量维度 数据治理 PDCA 闭环
下载PDF
基于车身尺寸数据流潜结构建模的装配质量预测控制 被引量:13
20
作者 刘银华 孙芮 吴欢 《中国机械工程》 EI CAS CSCD 北大核心 2019年第2期237-243,共7页
在对制造过程装配精度监控、诊断等方法进行综述的基础上,分析了现有车身质量检测系统下数据流的特点,总结现有基于数据驱动的装配精度控制方法的问题,提出了基于潜结构建模的车身多工位装配偏差预测控制方法,通过对多元检测数据主向量... 在对制造过程装配精度监控、诊断等方法进行综述的基础上,分析了现有车身质量检测系统下数据流的特点,总结现有基于数据驱动的装配精度控制方法的问题,提出了基于潜结构建模的车身多工位装配偏差预测控制方法,通过对多元检测数据主向量的提取与偏最小二乘回归模型的构建,实现了现有车身产品检测条件下的装配质量预测与控制。将该方法应用于车身前纵梁装配总成的质量控制案例,通过偏差数据流的偏最小二乘建模,实现总成关键特征的质量合格率预测与零部件质量的优化控制。数值仿真分析结果表明,经工艺优化后,总成测点波动6σ值平均下降了25%左右。 展开更多
关键词 车身尺寸 装配精度 数据驱动 质量控制 潜结构建模
下载PDF
上一页 1 2 3 下一页 到第
使用帮助 返回顶部