基于规则定制的数据质量检查系统设计与实现

数据质量对大数据分析决策具有重要影响,数据业务主管部门经常组织数据会审以检查和整改数据质量。针对现有技术检查工具功能不够全面、合理的问题,提出了一种基于规则定制的数据质量检查系统,构建了系统总体技术架构,形成了数据质量检查任务模型,设计了数据质量检查软件,建立了数据质量检查知识图谱,加强了检查规则管理功能,实现了基础字段、常规查询、扩展流程、外部插件四类检查方法,引入了图像智能检查技术。通过实际应用验证,系统增强了数据审核印证方法手段,有效提升了数据会审工作效果,促进了数据质量综合治理。