期刊文献+
共找到76篇文章
< 1 2 4 >
每页显示 20 50 100
QoS-aware replica placement for data intensive applications 被引量:2
1
作者 FU Xiong ZHU Xin-xin +1 位作者 HAN Jing-yu WANG Ru-chuan 《The Journal of China Universities of Posts and Telecommunications》 EI CSCD 2013年第3期43-47,共5页
In recent years, with the rapid development of data intensive applications, data replication has become an enabling technology for the data grid to improve data availability, and reduce file transfer time and bandwidt... In recent years, with the rapid development of data intensive applications, data replication has become an enabling technology for the data grid to improve data availability, and reduce file transfer time and bandwidth consumption. The placement of replicas has been proven to be the most difficult problem that must be solved to realize the process of data replication. This paper addresses the quality of service (QoS) aware replica placement problem in data grid, and proposes a dynamic programming based replica placement algorithm that not only has a QoS requirement guarantee, but also can minimize the overall replication cost, including storage cost and communication cost. By simulation, experiments show that the replica placement algorithm outperforms an existing popular replica placement technique in data grid. 展开更多
关键词 data grids data replication replica placement dynamic programming
原文传递
Replication Strategy with Comprehensive Data Center Selection Method in Cloud Environments
2
作者 M.A.Fazlina Rohaya Latip +1 位作者 Hamidah Ibrahim Azizol Abdullah 《Computers, Materials & Continua》 SCIE EI 2023年第1期415-433,共19页
As the amount of data continues to grow rapidly,the variety of data produced by applications is becoming more affluent than ever.Cloud computing is the best technology evolving today to provide multi-services for the ... As the amount of data continues to grow rapidly,the variety of data produced by applications is becoming more affluent than ever.Cloud computing is the best technology evolving today to provide multi-services for the mass and variety of data.The cloud computing features are capable of processing,managing,and storing all sorts of data.Although data is stored in many high-end nodes,either in the same data centers or across many data centers in cloud,performance issues are still inevitable.The cloud replication strategy is one of best solutions to address risk of performance degradation in the cloud environment.The real challenge here is developing the right data replication strategy with minimal data movement that guarantees efficient network usage,low fault tolerance,and minimal replication frequency.The key problem discussed in this research is inefficient network usage discovered during selecting a suitable data center to store replica copies induced by inadequate data center selection criteria.Hence,to mitigate the issue,we proposed Replication Strategy with a comprehensive Data Center Selection Method(RS-DCSM),which can determine the appropriate data center to place replicas by considering three key factors:Popularity,space availability,and centrality.The proposed RS-DCSM was simulated using CloudSim and the results proved that data movement between data centers is significantly reduced by 14%reduction in overall replication frequency and 20%decrement in network usage,which outperformed the current replication strategy,known as Dynamic Popularity aware Replication Strategy(DPRS)algorithm. 展开更多
关键词 Cloud computing data replication replica placement data center merits replication algorithm
下载PDF
Service for consistency management of replicas in data grid
3
作者 Ghalem Belalem Cherif Haddad Yahya Slimani 《通讯和计算机(中英文版)》 2009年第5期52-62,共11页
关键词 计算机 数据处理 数据格子 信号
下载PDF
基于“推荐-学习”的两阶段数据布局策略
4
作者 梁杨 丁长松 胡志刚 《南京师大学报(自然科学版)》 CAS 北大核心 2023年第4期80-90,共11页
针对数据布局不合理导致云边协同集群服务质量下降和运营开销增加等问题,提出一种基于“推荐-学习”的两阶段数据副本管理机制.鉴于数据密集型移动应用的特点,综合考虑了云边环境下的数据访问延迟和放置代价之间的最优权衡.从理论上构... 针对数据布局不合理导致云边协同集群服务质量下降和运营开销增加等问题,提出一种基于“推荐-学习”的两阶段数据副本管理机制.鉴于数据密集型移动应用的特点,综合考虑了云边环境下的数据访问延迟和放置代价之间的最优权衡.从理论上构建了副本放置的多目标数学模型,将决策问题描述为具有延迟和成本约束的双目标优化问题;在“推荐”阶段,设计了一个基于移动预测和反馈优化的副本推荐引擎,减少了副本创建的盲目性;在“学习”阶段,构建了一个基于异步优势行动者-评论家算法(A3C)的强化学习副本放置规则学习模型,改进了副本服务的全局性能指标.实验结果表明,基于“推荐-学习”的两阶段数据布局策略能够有效地减少等待延迟和节约成本开销,为现代云边协同系统的数据管理服务提供行之有效的解决方案,具有重要的理论意义和应用价值. 展开更多
关键词 数据布局 服务质量 数据密集型 副本推荐 规则学习
下载PDF
基于分布式文件系统HDFS的节能算法 被引量:58
5
作者 廖彬 于炯 +1 位作者 张陶 杨兴耀 《计算机学报》 EI CSCD 北大核心 2013年第5期1047-1064,共18页
与传统数据中心节能算法不同,MapReduce计算任务的数据依赖性使得设计HDFS(Hadoop Distributed File System)节能算法时必须保证集群中所有数据块的可用性,即任意数据块或其副本中的至少一块处于活动状态.根据HDFS集群结构与数据块存储... 与传统数据中心节能算法不同,MapReduce计算任务的数据依赖性使得设计HDFS(Hadoop Distributed File System)节能算法时必须保证集群中所有数据块的可用性,即任意数据块或其副本中的至少一块处于活动状态.根据HDFS集群结构与数据块存储等特点建立了DataNode节点矩阵、节点状态矩阵、文件分块矩阵、数据块存储矩阵与数据块状态矩阵,为后续研究建立了基础模型.结合数据块状态矩阵与数据块可用性之间的关系设计了DataNode节点休眠验证算法.概率分析了由于机架感知的存储策略带来数据块分布的随机性,使得在不改变数据块存储结构与存储策略的情况下并不能通过休眠DataNode节点达到节能的目的.进而设计了数据块存储结构配置节能算法与基于对称数据块存储策略下的节能算法,分别从改变数据块的存储结构与存储策略两方面对HDFS进行节能改进.实验结果表明:两种节能算法都能解决HDFS集群的能耗低利用率问题,并且集群负载越低节能效率越高. 展开更多
关键词 云计算 分布式文件系统 节能计算 副本策略 绿色计算
下载PDF
对等网络中一种优化的副本分布方法 被引量:18
6
作者 孙新 李庆洲 +2 位作者 赵璞 王克祥 潘凡 《计算机学报》 EI CSCD 北大核心 2014年第6期1424-1434,共11页
数据复制技术是一种提高P2P系统中数据可靠性和可用性的常用策略.现有复制方法大多只考虑副本数量,副本数量越多就越能提高资源访问效率,但采用这样的数据复制方法将会带来高昂的副本一致性维护代价.为平衡副本一致性维护的开销和多副... 数据复制技术是一种提高P2P系统中数据可靠性和可用性的常用策略.现有复制方法大多只考虑副本数量,副本数量越多就越能提高资源访问效率,但采用这样的数据复制方法将会带来高昂的副本一致性维护代价.为平衡副本一致性维护的开销和多副本带来的访问性能提升之间的关系,该文提出了动态副本分布方法.文中首先给出了副本目录的设计和副本信息的获取方法,能够获得某一逻辑资源的所有副本信息.然后,根据逻辑资源的全局副本信息,对访问频率高且平均响应时间长的数据资源进行复制,并给出副本数量的计算方法.最后,根据用户访问特征和节点实时带宽等信息计算放置副本的最佳地点,使副本分布能够适应数据访问请求和网络带宽的动态变化.模拟实验结果显示,该方法能够实现全局优化的副本分布,以少量数据副本提升资源访问的性能. 展开更多
关键词 对等网络 数据复制 副本分布 副本放置 副本数量 物联网
下载PDF
Hadoop副本放置策略 被引量:7
7
作者 邵秀丽 王亚光 +1 位作者 李云龙 刘一伟 《智能系统学报》 CSCD 北大核心 2013年第6期489-496,共8页
分布式文件系统(Hdfs)采用随机的副本放置策略使得系统在运行一段时间后会出现数据分布不均衡的情况,从而降低数据的可靠性和读取速率.为解决Hdfs默认副本放置策略存在的问题,对Hdfs副本放置策略进行改进:在副本放置选择时优先考虑存储... 分布式文件系统(Hdfs)采用随机的副本放置策略使得系统在运行一段时间后会出现数据分布不均衡的情况,从而降低数据的可靠性和读取速率.为解决Hdfs默认副本放置策略存在的问题,对Hdfs副本放置策略进行改进:在副本放置选择时优先考虑存储使用率低的节点.模拟实验一测试了机架数目对于算法的影响,结果显示改进后的副本放置策略中,机架数目对集群的均衡性影响很小,显示出较好的均衡性.模拟实验二测试了随着写入数据的增加,比较了使用改进前后的副本放置策略集群中节点使用率的标准差,证实了改进后的副本放置策略在存储均衡方面较原放置策略有着更好的表现. 展开更多
关键词 云存储 HDFS 副本放置 存储均衡 存储节点
下载PDF
基于教育资源网格的副本放置策略 被引量:6
8
作者 邢长明 杨林 刘方爱 《计算机工程》 CAS CSCD 北大核心 2008年第6期121-123,126,共4页
副本机制是提高网格性能,降低客户端延迟的有效手段,副本放置策略是副本机制的关键问题。该文介绍了教育资源网格的体系结构,针对教育资源网格特殊的体系结构,提出了3种动态副本放置策略,并从不同的角度对它们进行了优化,在保持副本存... 副本机制是提高网格性能,降低客户端延迟的有效手段,副本放置策略是副本机制的关键问题。该文介绍了教育资源网格的体系结构,针对教育资源网格特殊的体系结构,提出了3种动态副本放置策略,并从不同的角度对它们进行了优化,在保持副本存储空间占用的前提下,降低了客户端延迟。实验表明了策略的有效性。 展开更多
关键词 网格 副本 副本放置 教育资源
下载PDF
个体QoS受限的数据网格副本管理与更新方法 被引量:4
9
作者 付伟 肖侬 卢锡城 《计算机研究与发展》 EI CSCD 北大核心 2009年第8期1408-1415,共8页
数据网格系统通常采用副本技术提高系统总体性能,传统副本放置技术通过总体QoS需求确定副本数目和部署方式.针对QoS需求严格的一类数据网格应用,建立了个体服务质量受限的数据网格模型IQDG,提出一种启发式个体QoS受限的副本放置算法qGRE... 数据网格系统通常采用副本技术提高系统总体性能,传统副本放置技术通过总体QoS需求确定副本数目和部署方式.针对QoS需求严格的一类数据网格应用,建立了个体服务质量受限的数据网格模型IQDG,提出一种启发式个体QoS受限的副本放置算法qGREP和基于逻辑环结构的一致性维护方法.IQDG采用的启发信息综合考虑了个体QoS约束的满足和副本开销的控制,能获得合理的副本策略.理论分析论证了算法的正确性和收敛性,模拟实验结果表明了算法能有效解决个体QoS受限的副本放置问题,在多种网络拓扑、访问模式和负载条件下均能取得较好的访问效果. 展开更多
关键词 数据网格 个体服务质量 副本放置 副本环 副本一致性
下载PDF
数据网格中QoS感知的副本放置方法 被引量:3
10
作者 付雄 王义波 +1 位作者 朱鑫鑫 韩京宇 《系统工程与电子技术》 EI CSCD 北大核心 2014年第4期784-788,共5页
数据复制技术广泛用于数据网格,如何合理地放置复制时产生的数据副本来更有效地提高数据访问性能成为一个值得研究的重要问题。本文针对无向连通图表示的数据网格模型,提出了一种满足各用户服务质量(quality of service,QoS)需求的副本... 数据复制技术广泛用于数据网格,如何合理地放置复制时产生的数据副本来更有效地提高数据访问性能成为一个值得研究的重要问题。本文针对无向连通图表示的数据网格模型,提出了一种满足各用户服务质量(quality of service,QoS)需求的副本放置算法(replica placement algorithm,RPA),通过该QoS感知的副本放置算法能够获得k个副本放置位置,并且使得整个数据网格系统的通信代价最小。最后,文章通过相应的仿真实验证明了该算法的可靠性和有效性。 展开更多
关键词 数据网格 副本放置 QOS感知 动态规划
下载PDF
分布式媒体服务系统中的副本放置算法 被引量:5
11
作者 李挺屹 王劲林 王玲芳 《计算机工程》 CAS CSCD 北大核心 2010年第2期9-12,共4页
针对分布式媒体服务系统中的副本放置问题,从优化节点间的传输代价出发,提出一种基于全局信息的启发式副本放置算法——Zero2min,与现有算法相比,节省传输代价10%~36%。根据Zero2min算法的思路,给出媒体内容逐渐增加情况下的一种动态... 针对分布式媒体服务系统中的副本放置问题,从优化节点间的传输代价出发,提出一种基于全局信息的启发式副本放置算法——Zero2min,与现有算法相比,节省传输代价10%~36%。根据Zero2min算法的思路,给出媒体内容逐渐增加情况下的一种动态放置方法,仿真结果表明,其代价小于Max2min。 展开更多
关键词 副本放置 分布式媒体系统 启发式算法
下载PDF
用户兴趣感知的内容副本优化放置算法 被引量:2
12
作者 阳小龙 王欣欣 +2 位作者 张敏 隆克平 黄琼 《通信学报》 EI CSCD 北大核心 2014年第12期21-27,共7页
提出了用户兴趣感知的内容副本优化放置算法。该算法首先基于聚类算法从用户访问日志提取各用户的群体内容兴趣主题,依据其所辖用户的个体兴趣度加权得其群体兴趣度,并对其进行实时更新;然后在非线性优化模型下,以最小化平均响应时间为... 提出了用户兴趣感知的内容副本优化放置算法。该算法首先基于聚类算法从用户访问日志提取各用户的群体内容兴趣主题,依据其所辖用户的个体兴趣度加权得其群体兴趣度,并对其进行实时更新;然后在非线性优化模型下,以最小化平均响应时间为目标,优先放置群体兴趣度较大的副本,以实现被放置副本与用户内容兴趣主题的最大匹配。在平均响应时间、请求响应匹配度、负载均衡和邻近副本利用率等方面,与1-Greedy-Insert等算法进行对比,仿真结果显示各性能指标平均提升了约30%,验证了算法的有效性。 展开更多
关键词 副本放置 兴趣感知 聚类算法 兴趣主题
下载PDF
一种基于认知的动态副本放置方法 被引量:4
13
作者 韩国栋 朱一戈 张帆 《计算机应用与软件》 CSCD 北大核心 2013年第1期83-87,共5页
针对内容分发网中数据传输开销巨大的问题,提出一种基于认知的副本放置方法。通过对代理服务器反馈的用户需求动态信息,对内容流行度建立基于认知的预测模型,依据此模型启发式地完成内容的分发和放置。仿真结果表明,该方法能明显降低内... 针对内容分发网中数据传输开销巨大的问题,提出一种基于认知的副本放置方法。通过对代理服务器反馈的用户需求动态信息,对内容流行度建立基于认知的预测模型,依据此模型启发式地完成内容的分发和放置。仿真结果表明,该方法能明显降低内容分发网络的传输开销,同时满足时变用户的动态需求,具有低时延、低开销等优点。与一般的算法相比,该方法能显著提高缓存命中率和降低用户请求的平均响应时延。 展开更多
关键词 内容分发网 认知 内容流行度 预测模型 副本放置
下载PDF
云计算架构下的动态副本管理策略 被引量:8
14
作者 祝家钰 肖丹 《计算机工程与设计》 CSCD 北大核心 2012年第9期3362-3366,共5页
为有效管理云计算环境中的数据副本,减少系统带宽消耗、最小化响应时间和平衡负载,提出了一种动态副本管理策略。通过建立文件可用性和副本数量间的关系模型来计算系统应维持的最小副本数量;基于数据被请求访问的次数和传输花费进行副... 为有效管理云计算环境中的数据副本,减少系统带宽消耗、最小化响应时间和平衡负载,提出了一种动态副本管理策略。通过建立文件可用性和副本数量间的关系模型来计算系统应维持的最小副本数量;基于数据被请求访问的次数和传输花费进行副本放置;数据被请求时结合节点间带宽和节点效用选择副本。实验结果表明了该策略的正确性有效性。 展开更多
关键词 云计算 数据副本 动态管理 最小副本数 副本放置
下载PDF
分布式任务调度与副本复制集成策略研究 被引量:7
15
作者 易侃 王汝传 《通信学报》 EI CSCD 北大核心 2010年第9期94-101,共8页
研究了分布式任务调度和副本复制集成体系结构,并提出了基于博弈理论的分布式副本复制模型及相应算法——Best-Reply算法,最后通过仿真实验与其他4种算法进行比较。结果表明,尽管分布式的在线任务调度算法与Best-Reply算法集成策略与集... 研究了分布式任务调度和副本复制集成体系结构,并提出了基于博弈理论的分布式副本复制模型及相应算法——Best-Reply算法,最后通过仿真实验与其他4种算法进行比较。结果表明,尽管分布式的在线任务调度算法与Best-Reply算法集成策略与集中式的集成策略相比其任务平均完成时间稍高,但是它对存储空间的敏感度较低,网络负载更稳定,因此完全可以替代现有集中式的任务调度和副本复制集成策略。 展开更多
关键词 数据网格 分布式集成体系结构 副本管理 NASH均衡
下载PDF
基于支持向量机的HDFS副本放置改进策略 被引量:8
16
作者 罗军 陈仕强 《计算机工程》 CAS CSCD 北大核心 2015年第11期114-119,共6页
为实现超大规模数据的存储并提高容错性,Hadoop分布式文件系统(HDFS)采用一种机架感知的多副本放置策略。但在放置过程中没有综合考虑各节点服务器的差异性,导致集群出现负载失衡。由于放置时采用随机方式,造成节点之间的网络距离过长,... 为实现超大规模数据的存储并提高容错性,Hadoop分布式文件系统(HDFS)采用一种机架感知的多副本放置策略。但在放置过程中没有综合考虑各节点服务器的差异性,导致集群出现负载失衡。由于放置时采用随机方式,造成节点之间的网络距离过长,使得传输数据会消耗大量时间。针对以上问题,提出一种基于SVM的副本放置策略。通过综合考虑节点负载情况、节点硬件性能、节点网络距离为副本找到最佳的放置节点。实验结果表明,与HDFS原有的副本放置策略相比,该策略能更有效地实现负载均衡。 展开更多
关键词 支持向量机 云存储 副本放置策略 分布式文件系统 负载均衡 机架感知
下载PDF
一种基于Grid的多媒体内容分布框架 被引量:1
17
作者 李春洪 顾铁成 +2 位作者 李文中 陆桑璐 陈道蓄 《计算机科学》 CSCD 北大核心 2005年第5期105-108,共4页
基于互联网的大规模多媒体内容分发系统中,广泛地采用了数据复制技术来提高系统的性能。网格技术在构建大规模分布式信息系统方面,有着广阔的前景。本文提出了一种基于网格的多媒体内容分布框架,在网格基础服务的基础上,可以实现适用于... 基于互联网的大规模多媒体内容分发系统中,广泛地采用了数据复制技术来提高系统的性能。网格技术在构建大规模分布式信息系统方面,有着广阔的前景。本文提出了一种基于网格的多媒体内容分布框架,在网格基础服务的基础上,可以实现适用于流媒体应用的副本管理、传输和查找定位机制。此外,本文还对广域分布式信息系统中,副本的放置算法和用户请求调度机制等关键技术进行了深入探讨。 展开更多
关键词 内容分布 GRID 框架 分布式信息系统 数据复制技术 多媒体内容 分发系统 网格技术 定位机制 关键技术 调度机制 用户请求 互联网 流媒体 规模 基础 副本 广域 算法
下载PDF
云存储环境下QoS感知的副本放置算法 被引量:3
18
作者 张鸿 刘漳辉 林兵 《小型微型计算机系统》 CSCD 北大核心 2016年第9期1915-1919,共5页
云计算作为一种新的商业计算模型,提供了弹性计算和存储资源等服务.云计算具有超大规模、高可扩展性、高可靠性、虚拟化、按需服务和价格低廉等特点,许多用户把应用提交到云环境下运行.随着越来越多的数据密集型应用部署到云计算环境上... 云计算作为一种新的商业计算模型,提供了弹性计算和存储资源等服务.云计算具有超大规模、高可扩展性、高可靠性、虚拟化、按需服务和价格低廉等特点,许多用户把应用提交到云环境下运行.随着越来越多的数据密集型应用部署到云计算环境上运行,应用会有不同的QoS要求.为了保证在放置应用数据副本时,数据副本都能满足应用的QoS要求,我们需要考虑云计算环境下QoS约束的应用数据副本放置问题,为此提出一种QoS感知的副本放置算法(QoS-Aware Replica Placement with PSO,QRPPSO),该算法首先对QoS约束集的属性进行量化,然后构建目标优化模型,最后在副本放置优化算法引入粒子群优化来决定副本放置位置.仿真实验结果表明所提策略能有效解决QoS约束的应用数据副本放置问题. 展开更多
关键词 副本放置 QOS约束 粒子群算法 云计算
下载PDF
分布式存储系统中数据副本管理机制 被引量:5
19
作者 徐小龙 邹勤文 杨庚 《计算机技术与发展》 2013年第2期245-249,共5页
分布式存储系统需要完善的数据副本创建、部署、选择、定位和一致性管理机制以保证分布式计算环境中的数据安全、可用、可靠、可扩展性和服务的高效、连续性。文中全面分析与研究了国内外对分布式存储系统中的副本管理机制研究现状,重... 分布式存储系统需要完善的数据副本创建、部署、选择、定位和一致性管理机制以保证分布式计算环境中的数据安全、可用、可靠、可扩展性和服务的高效、连续性。文中全面分析与研究了国内外对分布式存储系统中的副本管理机制研究现状,重点对副本创建、副本定位、副本一致性维护和副本撤销机制进行深入的研究,并从数据可用性、节点负载均衡、数据一致性和带宽消耗等性能指标进行了分析。文中的研究成果对于分布式存储系统的合理设计与构建具有良好的参考价值。 展开更多
关键词 数据副本 副本创建 副本定位 数据一致性 副本撤销
下载PDF
对等网副本散布问题纯策略纳什均衡研究 被引量:3
20
作者 王文方 刘晓光 +1 位作者 王刚 刘璟 《计算机科学》 CSCD 北大核心 2006年第7期29-30,共2页
在对等网环境中为增强数据的可靠性与访问效率,需要将数据副本进行有效的散布。应用博弈论原理研究副本散布问题是一种有效的新方法。分析了当前使用博弈论方法研究所存在的问题,提出副本散布问题的基本博弈模型,首次证明了多对象且节... 在对等网环境中为增强数据的可靠性与访问效率,需要将数据副本进行有效的散布。应用博弈论原理研究副本散布问题是一种有效的新方法。分析了当前使用博弈论方法研究所存在的问题,提出副本散布问题的基本博弈模型,首次证明了多对象且节点容量有限情况下纯策略纳什均衡的存在性,较以前的研究成果更具有实用价值,且是今后进一步研究的基础。 展开更多
关键词 对等网 副本散布 纯策略纳什均衡
下载PDF
上一页 1 2 4 下一页 到第
使用帮助 返回顶部