期刊文献+
共找到8,519篇文章
< 1 2 250 >
每页显示 20 50 100
《中医药数据资源元数据》规范 被引量:1
1
作者 李海燕 贾李蓉 +7 位作者 聂莹 王斌 孙华君 傅昊阳 李静 张磊 王广志 付林飞 《中国中医药图书情报杂志》 2024年第1期1-15,共15页
《中医药数据资源元数据》的发布可为中医药数据资源提供元数据著录规范。通过对国内外相关元数据标准的调研及研究,结合中医药数据资源实际情况,在广泛征求专家意见基础上,制定本规范。本规范规定了中医药数据资源元数据结构,包括元数... 《中医药数据资源元数据》的发布可为中医药数据资源提供元数据著录规范。通过对国内外相关元数据标准的调研及研究,结合中医药数据资源实际情况,在广泛征求专家意见基础上,制定本规范。本规范规定了中医药数据资源元数据结构,包括元数据子集、元数据实体及元数据元素,用于完整描述中医药数据资源,适用于中医药数据资源的编目、归档、建库、发布、共享、交换与检索等,可以帮助用户从海量数据中发现符合需求的资源,以促进中医药领域数据资源描述的规范化和标准化。 展开更多
关键词 技术规范 数据 数据资源 中医药
下载PDF
基于对抗自编码填补网络的MIMO雷达故障阵元缺失数据重构 被引量:1
2
作者 陈金立 周龙 +1 位作者 姚昌华 李家强 《中国电子科学研究院学报》 2024年第4期297-306,共10页
多输入多输出(Multiple In Multiple Out,MIMO)雷达的阵元故障会导致其协方差矩阵出现整行整列数据缺失,从而降低其角度估计性能。为此,提出一种对抗自编码填补网络(Adversarial Autoencoder Imputation Network,AAEIN)来重构故障阵元... 多输入多输出(Multiple In Multiple Out,MIMO)雷达的阵元故障会导致其协方差矩阵出现整行整列数据缺失,从而降低其角度估计性能。为此,提出一种对抗自编码填补网络(Adversarial Autoencoder Imputation Network,AAEIN)来重构故障阵元的缺失数据。该网络由负责重构缺失数据的自动编码(Autoencoder,AE)网络和负责分辨数据来源的鉴别器组成。在二者的对抗训练中,AE网络的重构能力和鉴别器的分辨能力不断得到提升,直至两者收敛。为避免网络训练过程中参数量大和计算复杂度高的问题,文中结合MIMO雷达协方差矩阵的Hermitian特性,使用协方差矩阵上三角部分构建数据集用于网络训练。仿真结果表明,文中方法可以有效地重构故障阵元的缺失数据且具有较高的重构精度。 展开更多
关键词 MIMO雷达 故障 对抗自编码网络 HERMITIAN矩阵 数据重构
下载PDF
多源地理产品数据的元数据统一设计与采集管理技术
3
作者 刘阳成 廖宁 +3 位作者 左大伟 谢玉波 苏旭明 张鹏 《北京测绘》 2024年第3期332-336,共5页
面向多源地理产品数据管理应用的需求,明确了本文讨论的地理产品数据的范畴,分析了地理产品数据的存储组织及应用特点。基于存储组织需求,统一设计了数据大类小类两级分类目录及类别编码,设计了地理数据产品的元数据采集规范。提出了数... 面向多源地理产品数据管理应用的需求,明确了本文讨论的地理产品数据的范畴,分析了地理产品数据的存储组织及应用特点。基于存储组织需求,统一设计了数据大类小类两级分类目录及类别编码,设计了地理数据产品的元数据采集规范。提出了数据集-数据单元两级元数据的设计理念以便满足不同数据粒度的管理需求,分别设计了数据集元数据和数据单元元数据的详细组成,统一设计了空间地理产品数据与非空间地理产品数据的元数据,明确了数据集目录和数据单元的命名原则。设计并实现了能够自动采集多源地理产品元数据的软件,实现了基于统一元数据设计的数据管理软件。结果表明,这种方法能够满足用户对多源地理产品数据的统一存储组织、多粒度管理、高效便捷检索等需求。 展开更多
关键词 地理产品数据数据 数据 数据 数据采集 数据管理
下载PDF
基于智能化矿山数据分类与编码规范的元数据标准构建方法
4
作者 汪莹 祖子帅 王振华 《工矿自动化》 CSCD 北大核心 2024年第7期130-135,146,共7页
目前智能化矿山建设面临数据标准不健全、多源异构数据集成难度大、共享机制有待完善等问题。建立统一的智能化矿山元数据标准,对形成多源异构数据融合共享机制具有重要意义。基于智能化矿山数据分类与编码规范,研究了智能化矿山元数据... 目前智能化矿山建设面临数据标准不健全、多源异构数据集成难度大、共享机制有待完善等问题。建立统一的智能化矿山元数据标准,对形成多源异构数据融合共享机制具有重要意义。基于智能化矿山数据分类与编码规范,研究了智能化矿山元数据标准构建方法,明确了元数据标准构建是对数据分类与编码的延伸研究与价值挖掘。定义了元数据实体与元数据属性的内涵,设计了包含基础描述框架与扩展描述框架的智能化矿山元数据描述框架,给出了反映智能化矿山业务场景特征的基础元数据属性描述项和智能化矿山数据分类与编码规范中基础类、生产类、安全类、管理类4大主题域组的拓展元数据属性描述项,从而构成元数据标准。以生产主题域组中采煤机惯导系统的惯导传感器为例,介绍了元数据标准的构建过程。基于智能化矿山数据分类与编码规范构建元数据标准,可以解决多源异构数据的融合与共享问题,促使矿山企业更加高效地管理、分析和应用数据,提高矿山数据治理的智能化水平。 展开更多
关键词 智能化矿山 数据治理 数据分类与编码 数据标准 数据描述框架
下载PDF
基于MDR2023的元数据值域语义约束注册标准化模型研究
5
作者 袁满 何玲通 +1 位作者 袁靖舒 李洪欣 《数字图书馆论坛》 CSSCI 2024年第2期70-81,共12页
元数据注册(MetadataRegistry,MDR)是数据治理中元数据精确表达语义的必要前提。通过全面系统地分析国内外的MDR系统,发现国内外MDR更多关注基本数据元素,数据语义约束注册方面的研究缺乏。因此,首先基于ISO/IEC11179:2023(MDR2023)系... 元数据注册(MetadataRegistry,MDR)是数据治理中元数据精确表达语义的必要前提。通过全面系统地分析国内外的MDR系统,发现国内外MDR更多关注基本数据元素,数据语义约束注册方面的研究缺乏。因此,首先基于ISO/IEC11179:2023(MDR2023)系列标准提出元数据语义约束外延分类模型,明确元数据语义约束范围,并选取其中的值域语义约束详细研究;其次,基于MDR2023标准提出元数据值域语义约束注册元模型,为元数据语义约束注册提供标准化且完整的注册算法流程,从而为元数据值域语义约束注册提供解决方案;最后,以石油领域著名的POSC标准为需求背景,对其中的值域语义约束进行注册,据此实现石油领域元数据值域语义约束的标准化,验证提出的元数据值域语义约束注册元模型的合理性和可行性。提出的元模型对于其他领域数据治理具有普适性。 展开更多
关键词 数据 值域 语义约束 数据注册 注册模型 数据语义标准
下载PDF
中文电子图书描述元数据的质量控制过程研究
6
作者 李艳茹 阎雅娜 《图书馆学刊》 2024年第3期52-56,共5页
描述元数据是智慧图书馆资源管理的重要支撑。为完善中文电子图书描述元数据,依据《中国机读书目格式》和资源描述国家标准,借鉴目标馆管理经验,确定质量控制工作模式,执行中文电子图书元数据列清洗,提出元数据质量控制的双线策略:质量... 描述元数据是智慧图书馆资源管理的重要支撑。为完善中文电子图书描述元数据,依据《中国机读书目格式》和资源描述国家标准,借鉴目标馆管理经验,确定质量控制工作模式,执行中文电子图书元数据列清洗,提出元数据质量控制的双线策略:质量目标调节数据元素级描述模板、检索效率约束来源数据描述标识。 展开更多
关键词 中文图书 电子图书 描述数据 质量控制
下载PDF
国外高校图书馆元数据馆员调查研究
7
作者 张世怡 《高校图书馆工作》 2024年第4期79-85,共7页
在智慧图书馆开展知识服务的背景下,以编目为核心的信息组织工作面临巨大的挑战。国外图书馆通过引导编目馆员向元数据馆员转变,实现了图书馆信息组织的增值效应,元数据馆员在图书馆中的作用日益凸显,设置元数据馆员岗位、开展馆藏资源... 在智慧图书馆开展知识服务的背景下,以编目为核心的信息组织工作面临巨大的挑战。国外图书馆通过引导编目馆员向元数据馆员转变,实现了图书馆信息组织的增值效应,元数据馆员在图书馆中的作用日益凸显,设置元数据馆员岗位、开展馆藏资源的合理建设以及开展知识服务是值得深入考虑的问题。通过文献调研法和网络调研法,选取ALA、ARL、Choronicle等3个图情领域的权威网站,在其招聘板块中对元数据馆员岗位招聘信息中的岗位名称、所属部门、工作职责和知识技能等数据进行梳理和分析。从国外元数据馆员岗位的现状以及基本任职资质和首选资质上,得出推进编目馆员向元数据馆员角色转变、制定元数据馆员培养体系、适应元数据标准发展趋势和重视本馆特藏元数据馆员培养4个方面的元数据馆员岗位设置相关启示。 展开更多
关键词 高校图书馆 数据馆员 编目 岗位设置
下载PDF
基于CNN-LSTM的社交媒体大数据评论文本情感元自动识别方法
8
作者 刘丹 《微型电脑应用》 2024年第4期195-197,201,共4页
为了准确识别社交媒体评论文本情感,助力公众负面情绪引导,提出了基于CNN-LSTM的社交媒体大数据评论文本情感元自动识别方法。通过社交媒体大数据分类,并通过具有字典功能的Token将评论文本转换成数字列表。结合词嵌入技术得到向量列表... 为了准确识别社交媒体评论文本情感,助力公众负面情绪引导,提出了基于CNN-LSTM的社交媒体大数据评论文本情感元自动识别方法。通过社交媒体大数据分类,并通过具有字典功能的Token将评论文本转换成数字列表。结合词嵌入技术得到向量列表,完成社交媒体大数据向量转换的预处理。将预处理获取的向量列表输入CNN网络,得到评论文本情感元最终局部特征值。将该值传至LSTM,通过遗忘门、输入门、输出门调节,获取评论文本情感元特征表征结果,经Softmax分类器分类后,实现情感元自动识别。实验结果表明,该方法能有效完成实验数据预处理,用文字和标签的形式标记正面、负面情感元,并准确识别情感元,间接反映社会问题,应用性较强。 展开更多
关键词 社交媒体数据 评论文本 情感 向量列表 CNN-LSTM 自动识别
下载PDF
基于元数据驱动的数据治理与应用研究
9
作者 沈爱涛 《电脑知识与技术》 2024年第10期84-87,共4页
文章以江苏农牧科技职业学院数据治理项目建设为例,介绍了基于元数据驱动的数据质量检测与基于API技术的数据交换在智慧校园数据治理项目中的应用,再结合学院实际运行情况对一些常见问题进行了阐述。
关键词 数据 数据治理 数据交换 API
下载PDF
《数据论文出版元数据》国家标准研制与实践 被引量:3
10
作者 高瑜蔚 朱艳华 +2 位作者 胡良霖 孔丽华 赵欢 《中国科学数据(中英文网络版)》 CSCD 2024年第1期69-78,共10页
2023年8月,《GB/T 42813-2023数据论文出版元数据》国家标准正式发布,该标准规定了数据论文出版元数据的内容与结构,包括数据集元数据、数据论文元数据及其描述方法、扩展原则与方法。适用于数据论文及其关联数据集的描述、保存、在线... 2023年8月,《GB/T 42813-2023数据论文出版元数据》国家标准正式发布,该标准规定了数据论文出版元数据的内容与结构,包括数据集元数据、数据论文元数据及其描述方法、扩展原则与方法。适用于数据论文及其关联数据集的描述、保存、在线出版和共享服务等。该标准的发布标志着首次从国家层面对数据论文出版这一科学数据开放共享新模式进行了总体约定,解决了数据出版领域缺少标准规范指导的问题。有助于数据出版机构快速地发布数据论文和关联数据,为科学数据确权、产权保护提供支撑,对于推动科学数据开放共享生态建设具有重要意义。自标准发布以后,一些数据期刊或科学数据出版平台开始使用标准规定的元素与定义,开展较为广泛的实践。 展开更多
关键词 开放科学 数据论文 科学数据出版 数据 标准规范 科学数据
下载PDF
数据元标准化在航空装备数据治理中的应用 被引量:1
11
作者 付远祥 张驰 +1 位作者 邢磊 张柯尧 《中国标准化》 2024年第5期110-117,共8页
随着我国航空装备产业数字化进程的迅猛推进,航空装备企业内部数据大量累积,各业务部门逐渐出现数据来源不统一、数据不一致等诸多问题,形成了大量的“信息孤岛”“数据壁垒”等现象,给航空装备企业信息化发展带来了重重困难。为从根本... 随着我国航空装备产业数字化进程的迅猛推进,航空装备企业内部数据大量累积,各业务部门逐渐出现数据来源不统一、数据不一致等诸多问题,形成了大量的“信息孤岛”“数据壁垒”等现象,给航空装备企业信息化发展带来了重重困难。为从根本上解决以上问题,通过对航空装备数据现存问题进行深入分析,设计规划航空装备企业数据治理框架及实施策略,并从技术层面和管理层面对航空装备企业数据治理实施工作的开展提出了建议。 展开更多
关键词 数据 数据治理 数据 标准化
下载PDF
预印本资源元数据标准设计 被引量:1
12
作者 王朝阳 刘华 王丽婷 《数字图书馆论坛》 CSSCI 2024年第3期64-72,共9页
预印本是高端交流平台的重要文献资源之一,目前我国还未形成统一的预印本元数据标准,各个预印本平台的元数据结构存在较大差异,无法对国内预印本资源进行高质量整合,预印本平台与期刊编审系统的数据交互也存在问题。依据国内外预印本平... 预印本是高端交流平台的重要文献资源之一,目前我国还未形成统一的预印本元数据标准,各个预印本平台的元数据结构存在较大差异,无法对国内预印本资源进行高质量整合,预印本平台与期刊编审系统的数据交互也存在问题。依据国内外预印本平台实践经验与预印本资源特点,并结合我国预印本元数据标准应用场景,从通用描述、预印本描述、质量控制以及版权信息4个方面构建预印本元数据标准,以期推动预印本资源的共享和整合,促进预印本服务的可持续发展。 展开更多
关键词 预印本 数据 高端交流平台 标准
下载PDF
自然环境试验元数据体系研究
13
作者 周俊炎 王竟成 +2 位作者 赵方超 舒畅 黄伦 《装备环境工程》 CAS 2024年第4期156-164,共9页
目的形成自然环境试验元数据体系,为数据资源提供完备的描述及合理的规则规范,为数据库设计开发、数据挖掘分析、数据共建共享等提供支持。方法针对自然环境试验专业特点、数据类型以及应用需求,借鉴其他领域的元数据标准规范,梳理分析... 目的形成自然环境试验元数据体系,为数据资源提供完备的描述及合理的规则规范,为数据库设计开发、数据挖掘分析、数据共建共享等提供支持。方法针对自然环境试验专业特点、数据类型以及应用需求,借鉴其他领域的元数据标准规范,梳理分析自然环境试验涉及的数据特征元素集合,划分自然环境试验元数据类别,评估元数据作用,形成自然环境试验元数据体系。结果形成了覆盖数据集描述信息、要素参数信息、数据质量信息、维护信息、限制信息、数据集分发信息、元数据参考信息、数据应用成果信息共8个类别的自然环境试验元数据体系。结论自然环境试验元数据具有资源描述、数据选择、信息检索、管理溯源、解释分析、储存入库等作用,为数据有效管理和共建共享提供了基础。本文提出的元数据体系为自然环境试验元数据标准提供了参考思路。 展开更多
关键词 自然环境试验 数据 数据确认原则 数据类别 数据作用 数据体系
下载PDF
卫生健康信息数据元标准2023版和2011版比较研究
14
作者 孙函 杨啸林 +5 位作者 杨晟 周伟 张胜发 孟凡红 刘丽红 朱彦 《医学信息学杂志》 CAS 2024年第8期14-19,共6页
目的/意义对比分析卫生健康信息数据元标准2023版和2011版,探讨差异与改进之处,以期为标准的更新与实施提供有益的参考和指导。方法/过程整理对比2023版较2011版卫生健康信息数据元标准的更新内容,分析总结修订对标准化程度、规范化水... 目的/意义对比分析卫生健康信息数据元标准2023版和2011版,探讨差异与改进之处,以期为标准的更新与实施提供有益的参考和指导。方法/过程整理对比2023版较2011版卫生健康信息数据元标准的更新内容,分析总结修订对标准化程度、规范化水平以及数据完整性和准确性等方面的提升作用。结果/结论2023版在数据完整性和规范化等方面实现显著提升。分析2023版标准在实施过程中可能面临的挑战和问题,提出针对性建议和对策。 展开更多
关键词 卫生信息 数据 值域代码 数据标准 标准化
下载PDF
基于大数据元分析的调节效应识别:基础模型与实证检验
15
作者 林伟杰 周文杰 +1 位作者 魏志鹏 杨克虎 《情报学报》 CSSCI CSCD 北大核心 2024年第5期553-562,共10页
作为实证研究中识别因果关系的一种重要方法,调节效应检验有助于揭示自变量和因变量之间的深层次关系,然而该方法存在无法获得真实效应值且外部效度低等问题。受限于原始研究与生俱来的缺陷,循证领域亟待发展出新的调节效应识别模型。... 作为实证研究中识别因果关系的一种重要方法,调节效应检验有助于揭示自变量和因变量之间的深层次关系,然而该方法存在无法获得真实效应值且外部效度低等问题。受限于原始研究与生俱来的缺陷,循证领域亟待发展出新的调节效应识别模型。本研究采用大数据循证理念,利用循环方法对控制变量进行排列组合,从而模拟了“穷尽”所有可能的原始研究设计,对全部可能的变量间关系进行了回归分析并记录所有效应值。进而,使用元分析法对全部原始效应量进行全覆盖式合并,以获得真实的效应值,以此提升调节效应结果的外部效度。最后,本研究以信息贫困研究为例,详细展示了大数据循证视角下调节效应识别的所有流程。本研究的主要贡献在于完善了大数据循证理念下的元分析方法体系,从大量原始研究效应中提取了真实效应值,提高了调节效应的外部效度与因果关系识别的可靠性。 展开更多
关键词 数据分析 调节效应 循证社会科学 因果关系
下载PDF
面向民用飞机装配工艺规范数字化建设的标准元数据质量测评研究
16
作者 苏萍 邹小筑 安鲁陵 《情报工程》 2024年第4期36-46,共11页
[目的/意义]国内民用飞机装配工艺规范数字化建设相对国外缓慢,实践过程中存在很多阻滞。目前鲜有从数字化需求对标准元数据质量进行测评的研究,相关研究既能从内容层面对元数据描述提出建设性意见,提高标准信息资源的数字化质量,又能... [目的/意义]国内民用飞机装配工艺规范数字化建设相对国外缓慢,实践过程中存在很多阻滞。目前鲜有从数字化需求对标准元数据质量进行测评的研究,相关研究既能从内容层面对元数据描述提出建设性意见,提高标准信息资源的数字化质量,又能推进民用飞机装配工艺数字化进程,助力智能制造。[方法/过程]对工艺规范与标准信息资源概念进行对比,分析民用飞机装配工艺规范数字化及标准元数据进展;理清民用飞机装配工艺规范数字化需求,基于调整后的Bruce Hillmann测评指标确定了工艺规范数字化需求下的标准元数据质量测评方案;以国家军用标准全文服务系统为例,对标最新版国家《标准文献元数据》,分析元数据对标准内容的揭示程度与数字化需求之间的差距,提出建议。[局限]单案例研究,典型性和全面性仍有待验证。[结果/结论]分析民用飞机装配工艺规范数字化进展和需求发现:数字化质量亟待提高,面向航空工艺规范的元数据标准是学界及业界需要共同解决的问题;通过测评数据发现:在描述上,元数据类型划分针对性不强,内容描述粗粒度,具体对象需求数据分散化,图表数字化程度低。因此建议:建立行业工艺规范元数据标准,提升工艺规范数据描述精度,以对象为中心推进工艺规范数据模块化,协调标准界、数据库商、业界共同推进工艺规范制定与同步数字化。 展开更多
关键词 工艺规范 标准 数字化 数据质量
下载PDF
智慧图书馆建设视角下馆员元数据核心能力构建 被引量:3
17
作者 贾君枝 张贵香 《中国图书馆学报》 CSSCI 北大核心 2024年第2期56-69,共14页
构建与智慧图书馆建设目标相适配、与实践需求相结合的馆员核心能力体系,能够有效促进馆员的专业化发展,对于全国智慧图书馆体系建设也具有重要意义。本文通过梳理国家级战略规划以及图书馆“十四五”发展规划,挖掘智慧图书馆建设中元... 构建与智慧图书馆建设目标相适配、与实践需求相结合的馆员核心能力体系,能够有效促进馆员的专业化发展,对于全国智慧图书馆体系建设也具有重要意义。本文通过梳理国家级战略规划以及图书馆“十四五”发展规划,挖掘智慧图书馆建设中元数据管理需求,确定战略目标;参考元数据馆员岗位职责,分析战略目标实现过程中的各项元数据活动;基于已有馆员核心能力标准,梳理馆员元数据核心能力要素。根据布鲁姆教育目标分类法,将核心能力分为三类:能懂(记忆与理解)、能做(分析与应用)和能创新(评价与创造),构建馆员元数据核心能力框架,该框架可以作为评估馆员元数据能力的分级标准,有助于培养元数据管理人才,为智慧图书馆建设提供人才支撑。 展开更多
关键词 智慧图书馆 图书馆员 数据 核心能力
下载PDF
河北省风险普查信息资源元数据标准研究——以地震灾害为例
18
作者 王晓莎 王慧彦 《中国地震》 北大核心 2024年第2期344-354,共11页
河北省第一次全国自然灾害综合风险普查工作开展至今,积累了大量的数据信息资源,基本实现了地震灾害相关基础数据与其他信息资源的全覆盖。为稳固和提升普查成果、探索数据管理标准化路径,同时为自然灾害综合风险普查数据归集研究奠定基... 河北省第一次全国自然灾害综合风险普查工作开展至今,积累了大量的数据信息资源,基本实现了地震灾害相关基础数据与其他信息资源的全覆盖。为稳固和提升普查成果、探索数据管理标准化路径,同时为自然灾害综合风险普查数据归集研究奠定基础,本文从综合防灾减灾的指导思想出发,构建地震灾害信息资源元数据标准及其扩展机制,帮助普查数据有效归集与统一管理,以期促进普查数据成果再利用,使普查数据成果更好地服务于地震灾害防治工作,进而促进大数据等现代技术在综合防灾减灾领域的科学应用。 展开更多
关键词 地震灾害 数据 信息资源 数据标准 风险普查
下载PDF
城市轨道交通工程中电子文件元数据归档的难点及对策分析 被引量:2
19
作者 陈雯 袁月 +3 位作者 王俊淘 刘钰 刘琦 王希 《档案管理》 北大核心 2024年第1期101-104,共4页
在档案管理中,元数据是描述档案内容、结构、背景等属性的数据,有助于高效管理电子档案,保障电子文件的真实性、完整性、可用性和安全性。基于识别、收集和管理城市轨道交通工程中原生电子文件携带的大量元数据的现实需要,通过调查,分... 在档案管理中,元数据是描述档案内容、结构、背景等属性的数据,有助于高效管理电子档案,保障电子文件的真实性、完整性、可用性和安全性。基于识别、收集和管理城市轨道交通工程中原生电子文件携带的大量元数据的现实需要,通过调查,分析元数据在城市轨道交通工程业务活动中呈现出的特殊性,厘清目前元数据归档工作的难点,提出元数据归档的三条优化路径,并探析科学的元数据归档方案,力图解决目前存在的元数据归档范围不明确、内容不清晰等问题。 展开更多
关键词 城市轨道交通 电子文件 数据 电子档案 归档 知识管理 数据实体 数据描述
下载PDF
一种基于动态空间划分和压缩布隆过滤器相结合的分布式元数据负载均衡算法
20
作者 薛梅婷 俞万刚 +3 位作者 张纪林 曾艳 袁俊峰 周丽 《计算机工程与科学》 CSCD 北大核心 2024年第8期1381-1389,共9页
分布式元数据管理系统利用多个元数据服务器对大量元数据进行存储和管理。该系统将海量元数据通过不同的映射策略分配到不同的元数据服务器上,减少单台元数据服务器所处理的数据量,从而减少磁盘访问次数,进而提高整个元数据管理系统的... 分布式元数据管理系统利用多个元数据服务器对大量元数据进行存储和管理。该系统将海量元数据通过不同的映射策略分配到不同的元数据服务器上,减少单台元数据服务器所处理的数据量,从而减少磁盘访问次数,进而提高整个元数据管理系统的性能。元数据管理系统通常会使用哈希函数将元数据键映射到不同的元数据服务器中。然而,当数据特征值相似时,由于散列函数的单向性,会导致数据分布不均衡的问题,造成元数据服务器性能下降。为解决上述问题,提出了一种动态空间划分和压缩布隆过滤器相结合的元数据负载均衡算法,该算法首先构建一个哈希桶来组织元数据键,通过哈希算法将元数据键映射到不同的哈希桶中;在映射过程中,根据元数据服务器的负载情况动态调整目标哈希桶,并在上述哈希桶中有序地保存元数据键的映射信息。当访问元数据时,首先通过压缩布隆过滤器对元数据键进行预处理,然后通过二分查找在指定的哈希桶中进行元数据映射信息的查找。与近年来提出的元数据管理算法相比,所提算法在映射键发生倾斜时仍能保证元数据服务器负载均衡,并通过对比实验表明,所提算法相比最优的元数据管理算法,在内存占用仅提升2%的条件下,获得了20%的搜索性能提升。 展开更多
关键词 分布式数据管理 负载均衡算法 一致性哈希 压缩布隆过滤器
下载PDF
上一页 1 2 250 下一页 到第
使用帮助 返回顶部