期刊文献+
共找到7篇文章
< 1 >
每页显示 20 50 100
分布式大数据函数依赖发现 被引量:9
1
作者 李卫榜 李战怀 +3 位作者 陈群 姜涛 刘海龙 潘巍 《计算机研究与发展》 EI CSCD 北大核心 2015年第2期282-294,共13页
在关系数据库中,函数依赖发现是一种十分重要的数据库分析技术,在知识发现、数据库语义分析、数据质量评估以及数据库设计等领域有着广泛的应用.现有的函数依赖发现算法主要针对集中式数据,通常仅适用于数据规模比较小的情况.在大数据... 在关系数据库中,函数依赖发现是一种十分重要的数据库分析技术,在知识发现、数据库语义分析、数据质量评估以及数据库设计等领域有着广泛的应用.现有的函数依赖发现算法主要针对集中式数据,通常仅适用于数据规模比较小的情况.在大数据背景下,分布式环境函数依赖发现更富有挑战性.提出了一种分布式环境下大数据的函数依赖发现算法,其基本思想是首先在各个节点利用本地数据并行进行函数依赖发现,基于以上发现的结果对函数依赖候选集进行剪枝,然后进一步利用函数依赖的左部(left hand side,LHS)的特征,对函数依赖候选集进行分组,针对每一组候选函数依赖并行执行分布式环境发现算法,最终得到所有函数依赖.对不同分组情况下所能检测的候选函数依赖数量进行了分析,在算法的执行过程中,综合考虑了数据迁移量和负载均衡的问题.在真实的大数据集上的实验表明,提出的检测算法在检测效率方面与已有方法相比有明显的提升. 展开更多
关键词 函数依赖发现 函数依赖 大数据 知识发现 并行计算
下载PDF
Spark平台下的分布式函数依赖发现算法 被引量:6
2
作者 朱星宇 蔡志成 +2 位作者 刘段 徐建 李小平 《小型微型计算机系统》 CSCD 北大核心 2020年第8期1569-1575,共7页
函数依赖发现被广泛应用于分布式大数据分析,是数据清洗、质量评估和语义分析的重要手段.已有函数依赖发现算法主要针对集中式数据,不适用于分布在不同节点上的云计算数据.将分布式数据汇集到集中节点非常耗时,而使用传统集中式方法分... 函数依赖发现被广泛应用于分布式大数据分析,是数据清洗、质量评估和语义分析的重要手段.已有函数依赖发现算法主要针对集中式数据,不适用于分布在不同节点上的云计算数据.将分布式数据汇集到集中节点非常耗时,而使用传统集中式方法分别处理分布式节点上的数据会导致错误的结果.已经存在的分布式算法存在内存消耗过大的缺点.因此,本文提出一种基于云计算数据处理平台Spark的快速低内存分布式函数依赖发现算法.该算法提出了多个分布式任务分配策略和基于标识符集一致性的最大等价类元素去重策略,在保障正确性前提下,减少了集合交集运算的次数,加快了处理速度.实验结果表明,与传统集中式算法相比,本文提出的分布式算法在本实验环境下使平均执行时间降低了50%左右,去重策略进一步降低了30%左右执行时间.和已有分布式函数依赖发现算法相比,在有些实例上可以节省大约75%的内存. 展开更多
关键词 数据挖掘 函数依赖发现 Dep_Miner 分布式计算 SPARK
下载PDF
基于聚类离散化的Dep-Miner函数依赖发现方法
3
作者 仓敏 王静怡 +3 位作者 吴霜 翟晓萌 程曦 诸德律 《南京理工大学学报》 CAS CSCD 北大核心 2023年第3期318-329,共12页
针对已有函数依赖发现方法直接应用于连续型数据时,易导致依赖关系挖掘失败的问题,该文基于已有Dep-Miner方法,提出基于等间隔离散化的Dep-Miner(ED-Dep-Miner)和基于聚类离散化的Dep-Miner(CD-Dep-Miner)函数依赖发现方法。通过数据离... 针对已有函数依赖发现方法直接应用于连续型数据时,易导致依赖关系挖掘失败的问题,该文基于已有Dep-Miner方法,提出基于等间隔离散化的Dep-Miner(ED-Dep-Miner)和基于聚类离散化的Dep-Miner(CD-Dep-Miner)函数依赖发现方法。通过数据离散化,将指标的连续型数据合理地转变为类别数据。实现基于类别数据的函数依赖发现,提升函数依赖发现能力。同时,对Dep-Miner中的部分定理给出了基于反证法和枚举法的通俗化证明。该文将提出的ED-Dep-Miner和CD-Dep-Miner与不带有任何离散化操作的原始Tane和Dep-Miner进行了实验对比。实验结果表明,该文的ED-Dep-Miner和CD-Dep-Miner方法将原始连续型数据转化为离散型分类,挖掘出了更多潜在的函数依赖关系。同时,CD-Dep-Miner的性能要优于ED-Dep-Miner,解决了等间隔离散化存在的边界值问题。 展开更多
关键词 聚类 离散化 函数依赖发现 等间隔离散化 类别数据 反证法 枚举法 边界值问题
下载PDF
P-集合与动态信息的依赖-发现 被引量:17
4
作者 汪洋 耿红琴 史开泉 《系统工程与电子技术》 EI CSCD 北大核心 2011年第9期2035-2038,共4页
P-集合是一个集合对,它是由内P-集合(internal packet set)与外P-集合(outer packet set)共同构成。P-集合具有动态特征,是通过改进普通集合得到的,或者用动态特性代替普通集合的静态特性,也可得到P-集合。利用P-集合的结构与动态特性,... P-集合是一个集合对,它是由内P-集合(internal packet set)与外P-集合(outer packet set)共同构成。P-集合具有动态特征,是通过改进普通集合得到的,或者用动态特性代替普通集合的静态特性,也可得到P-集合。利用P-集合的结构与动态特性,给出动态信息生成和动态度的概念,提出动态信息生成的依赖特性、动态信息依赖、信息依赖-发现定理和信息依赖-发现准则等。最后,给出动态信息依赖-发现在信息状态识别中的应用。 展开更多
关键词 P-集合 动态信息生成 依赖-发现定理
下载PDF
XML函数依赖研究综述 被引量:2
5
作者 刘嘉 廖湖声 《计算机工程与科学》 CSCD 北大核心 2014年第2期331-339,共9页
函数依赖作为数据库规范化的基础在关系理论中起着重要的作用。近年来,XML得到广泛应用并已成为互联网上数据传输和交换的标准。由于XML半结构化的特性,使得如何定义XML函数依赖使其具有更强的描述能力,以及如何解决相应的逻辑蕴涵问题... 函数依赖作为数据库规范化的基础在关系理论中起着重要的作用。近年来,XML得到广泛应用并已成为互联网上数据传输和交换的标准。由于XML半结构化的特性,使得如何定义XML函数依赖使其具有更强的描述能力,以及如何解决相应的逻辑蕴涵问题成为当今学术界所面临的挑战。针对这些问题,系统地描述了目前关于XML函数依赖的研究现状,特别是把分析的重点放在如何定义函数依赖、判断其蕴涵关系以及从XML文档中发现函数依赖等问题上。最后讨论了诸如类型化函数依赖关系等一些相关的研究方向。 展开更多
关键词 XML 函数依赖 逻辑蕴涵 依赖发现
下载PDF
图依赖研究与应用综述 被引量:1
6
作者 余旭 曹建军 +2 位作者 翁年凤 袁震 曾志贤 《计算机应用研究》 CSCD 北大核心 2023年第5期1312-1317,共6页
图依赖是用于解决图数据的数据一致性问题的数据质量规则。基于图依赖提升数据一致性的过程通常分为图依赖定义与形式化、图依赖自动挖掘、基于图依赖的数据一致性提升三步。介绍了针对数据一致性的图依赖理论,并根据拓展类型将图依赖... 图依赖是用于解决图数据的数据一致性问题的数据质量规则。基于图依赖提升数据一致性的过程通常分为图依赖定义与形式化、图依赖自动挖掘、基于图依赖的数据一致性提升三步。介绍了针对数据一致性的图依赖理论,并根据拓展类型将图依赖分为基于结构约束拓展、基于语义约束拓展和基于外部约束拓展的图依赖;综述并对比了从图数据中自动挖掘图依赖及其拓展的算法;分析了应用图依赖提高数据一致性的研究现状;总结了当前研究中仍存在的问题,并依据问题展望了图依赖在数据质量领域的应用前景。 展开更多
关键词 依赖 数据一致性 依赖发现 一致性检测 知识图谱
下载PDF
Te^(4+)-doped Cs_(2)InCl_(5)·H_(2)O single crystals for remote optical thermometry 被引量:2
7
作者 Jun-Hua Wei Jian-Bin Luo +2 位作者 Jin-Feng Liao Wei-Tao Ou Dai-Bin Kuang 《Science China Materials》 SCIE EI CAS CSCD 2022年第3期764-772,共9页
Zero-dimensional metal halide perovskites have captured intense research interest owing to their unique optoelectronic properties.Particularly,metal halides with the ns^(2) electronic configuration are of great intere... Zero-dimensional metal halide perovskites have captured intense research interest owing to their unique optoelectronic properties.Particularly,metal halides with the ns^(2) electronic configuration are of great interest owing to the high-temperature sensitivity of their photoluminescence,which could be applied to remote optical thermometry(ROT).Herein,all-inorganic and lead-free halide perovskite Te^(4+)-doped Cs_(2)InCl_(5)·H_(2)O single crystals(SCs)were prepared through the hydrothermal method and showed a strong temperature dependence of photoluminescence lifetime.Upon Te^(4+) doping,the nonemissive Cs_(2)InCl_(5)·H_(2)O SC exhibits a bright orange emission at 660 nm with a wide full width at half maximum of 180 nm.The strong phonon-exciton coupling promotes the formation of self-trapped excitons in the soft lattice of the zero-dimensional Te^(4+)-doped Cs_(2)InCl_(5)·H_(2)O SC.The Te^(4+) ions with the 5 s^(2) electronic configuration endow the Te^(4+)-doped Cs_(2)InCl_(5)·H_(2)O SC with a strong temperaturedependent photoluminescence lifetime.This SC reaches a maximum specific sensitivity of 0.062 K^(-1) at 320 K,thereby showing the potential advantages of indium-based metal halide perovskites in ROT applications. 展开更多
关键词 metal halide perovskite remote optical thermometry PHOTOLUMINESCENCE LEAD-FREE
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部