期刊文献+
共找到10篇文章
< 1 >
每页显示 20 50 100
用数据驱动的编程模型并行多重网格应用 被引量:1
1
作者 郭杰 高希然 +2 位作者 陈莉 傅游 刘颖 《计算机科学》 CSCD 北大核心 2020年第8期32-40,共9页
多重网格是数值计算领域中一种加速迭代收敛的重要技术,被广泛应用。近年来,大规模并行计算系统向多核化、异构众核化发展,多重网格应用也亟须适应新的并行计算平台。文中采用一种数据驱动的任务并行语言AceMesh将遗产的NAS MG程序移植... 多重网格是数值计算领域中一种加速迭代收敛的重要技术,被广泛应用。近年来,大规模并行计算系统向多核化、异构众核化发展,多重网格应用也亟须适应新的并行计算平台。文中采用一种数据驱动的任务并行语言AceMesh将遗产的NAS MG程序移植到“天河二号”和“神威·太湖之光”两种不同架构的国产超算平台上,展示了使用该语言对计算循环、通信代码的任务并行方法,验证了AceMesh语言的跨平台性能可移植性。文中定性地分析了该应用的任务图特征和计算-通信重叠的特点,并分别在两个并行计算平台上将其与现有编程模型MPI/OpenMP和MPI/OpenACC进行性能对比,分析了AceMesh任务图并行程序对访存性能和通信-计算重叠的优化效果。实验数据表明,相比传统的并行编程方法,AceMesh在“神威·太湖之光”和“天河二号”平台上分别最高获得了1.19X和1.85X的性能加速。最后,针对该应用在不同网格层的通信特点以及通信序列化导致大量通信不能隐藏的问题,提出了未来的研究方向。 展开更多
关键词 多重网格 MPI遗产应用 数据驱动的任务并行编程模型 异构众核 计算-通信重叠
下载PDF
基于GPU的多数据流相关系数并行计算方法研究 被引量:2
2
作者 周勇 王皓 +1 位作者 程春田 郭禾 《计算机应用研究》 CSCD 北大核心 2010年第4期1232-1235,共4页
为了满足多数据流处理的实时性需求,提出一种跨PCIE总线的四层滑动窗口模型和基于图形处理器的多数据流并行处理框架模型,在此框架模型下可以并行维护数量巨大的滑动实时多数据流统计信息,同时采用精确方法并行计算多数据流间任意两条... 为了满足多数据流处理的实时性需求,提出一种跨PCIE总线的四层滑动窗口模型和基于图形处理器的多数据流并行处理框架模型,在此框架模型下可以并行维护数量巨大的滑动实时多数据流统计信息,同时采用精确方法并行计算多数据流间任意两条的相关系数。通过对比在同样的实验环境下只使用CPU的计算处理方法,验证了新方法的实时计算性能具有显著的提高。 展开更多
关键词 数据 滑动多数据流相关系数 图形处理器 数据并行计算模型 空间复杂度降载
下载PDF
并行处理技术在地理信息数据处理中的应用 被引量:1
3
作者 徐道柱 金澄 焦洋洋 《测绘科学技术学报》 CSCD 北大核心 2016年第6期629-634,共6页
随着地理信息存储量的飞速增长,传统的单进程、集中式的数据处理方式已不能满足基于网络的地理信息服务的效能要求。分析对比了OpenMP,MPI和MapReduce等主流并行编程模式,将关系型数据库与分布式空间数据管理系统相结合,提出了面向并行... 随着地理信息存储量的飞速增长,传统的单进程、集中式的数据处理方式已不能满足基于网络的地理信息服务的效能要求。分析对比了OpenMP,MPI和MapReduce等主流并行编程模式,将关系型数据库与分布式空间数据管理系统相结合,提出了面向并行处理的地理信息存储模型和数据组织模型,将该模型与传统模型进行了对比分析,并基于MapReduce实现了地理空间数据并行处理框架,选取了矢量数据装载、影像数据装载以及数据切片作为典型数据处理案例开展对比实验,该技术方案的处理效率均数倍于传统技术方案。实验表明,该模型能够很好地支持并行处理框架,可为分布式环境下数据处理中心构建提供一个有效解决方案。 展开更多
关键词 并行处理 MAPREDUCE框架 主服务器集群 并行矢量数据模型 数据切片
下载PDF
基于消息传递的并行程序设计应用研究
4
作者 周德仿 《黄冈职业技术学院学报》 2004年第3期42-45,共4页
本文从分布式存储的并行计算机入手,引出了它的两种并行编程模型 消息传递模型和数据并行模型。在消息传递模型中,并行程序设计的首要考虑是计算问题的分解。于是,从并行算法中的并行分解开始,讨论了基于消息传递的两种分解方法——域... 本文从分布式存储的并行计算机入手,引出了它的两种并行编程模型 消息传递模型和数据并行模型。在消息传递模型中,并行程序设计的首要考虑是计算问题的分解。于是,从并行算法中的并行分解开始,讨论了基于消息传递的两种分解方法——域分解法和功能分解法。最后最为重要的是,着重讨论了对应于域分解法的数据并行形式和对应于功能分解法的函数并行形式。 展开更多
关键词 并行程序设计 消息传递模型 域分解法 功能分解法 数据并行模型
下载PDF
大数据环境下Hadoop分布式系统的研究与设计 被引量:10
5
作者 廖锋 成静静 《广东通信技术》 2013年第10期22-27,共6页
随着互联网应用的飞速发展和信息的社会化数据呈爆发式的增长,传统的关系数据库在处理分析如此海量的数据时出现性能和可扩展性的瓶颈,通过介绍目前大数据时代面临的挑战,分析了大数据对IT系统的挑战以及针对大数据业务特点的应对策略... 随着互联网应用的飞速发展和信息的社会化数据呈爆发式的增长,传统的关系数据库在处理分析如此海量的数据时出现性能和可扩展性的瓶颈,通过介绍目前大数据时代面临的挑战,分析了大数据对IT系统的挑战以及针对大数据业务特点的应对策略。目前大数据技术目前还没形成统一标准,但业界已经广泛使用Hadoop分布式系统作为其大数据处理平台,对大数据环境下Hadoop分布式系统进行了详尽的研究与设计,包括分布式文件系统、并行计算模型、分布式数据库、分布式锁服务等各个功能模块,大数据环境下的Hadoop分布式系统将更有效支撑未来电信运营商业务的发展。 展开更多
关键词 数据 高并发 高存储 高扩展性和可用性 MPP架构 NOSQL数据 Hadoop分布式系统分布式文件系统(HDFS) 并行数据处理模型(MapReduce) 分布式数据库(HBase BigTable) 分布式锁服务(ZooKeeper Chubby)
下载PDF
分布式机器学习中的通信机制研究综述 被引量:2
6
作者 杜海舟 黄晟 《上海电力大学学报》 CAS 2021年第5期496-500,511,共6页
与传统的分布式计算不同,分布式机器学习更加关注参数同步和梯度同步,网络通信是最大的瓶颈。许多研究者针对网络问题提出了多种解决方法。首先介绍了机器学习领域内最热门的深度神经网络的发展背景,然后分别对数据并行模型中参数同步... 与传统的分布式计算不同,分布式机器学习更加关注参数同步和梯度同步,网络通信是最大的瓶颈。许多研究者针对网络问题提出了多种解决方法。首先介绍了机器学习领域内最热门的深度神经网络的发展背景,然后分别对数据并行模型中参数同步步调和参数同步方法进行了详细的概述,最后对分布式机器学习的发展趋势和面临的挑战进行了讨论。 展开更多
关键词 分布式机器学习 数据并行模型 参数通信 并行计算
下载PDF
Two-dimensional inversion of spectral induced polarization data using MPI parallel algorithm in data space 被引量:2
7
作者 张志勇 谭捍东 +3 位作者 王堃鹏 林昌洪 张斌 谢茂笔 《Applied Geophysics》 SCIE CSCD 2016年第1期13-24,217,共13页
Traditional two-dimensional(2D) complex resistivity forward modeling is based on Poisson's equation but spectral induced polarization(SIP) data are the coproducts of the induced polarization(IP) and the electro... Traditional two-dimensional(2D) complex resistivity forward modeling is based on Poisson's equation but spectral induced polarization(SIP) data are the coproducts of the induced polarization(IP) and the electromagnetic induction(EMI) effects.This is especially true under high frequencies,where the EMI effect can exceed the IP effect.2D inversion that only considers the IP effect reduces the reliability of the inversion data.In this paper,we derive differential equations using Maxwell's equations.With the introduction of the Cole-Cole model,we use the finite-element method to conduct2 D SIP forward modeling that considers the EMI and IP effects simultaneously.The data-space Occam method,in which different constraints to the model smoothness and parametric boundaries are introduced,is then used to simultaneously obtain the four parameters of the Cole-Cole model using multi-array electric field data.This approach not only improves the stability of the inversion but also significantly reduces the solution ambiguity.To improve the computational efficiency,message passing interface programming was used to accelerate the 2D SIP forward modeling and inversion.Synthetic datasets were tested using both serial and parallel algorithms,and the tests suggest that the proposed parallel algorithm is robust and efficient. 展开更多
关键词 Spectral induced polarization 2D inversion data-space method Cole-Cole model MPI parallel computation
下载PDF
A Hierarchical Virus Immunization Method for Community Networks 被引量:1
8
作者 FU Cai LI Min ZHANG Yunhe ZOU Deqing HAN Lansheng 《China Communications》 SCIE CSCD 2014年第9期148-159,共12页
Due to the enormous harm of virus propagation,research regarding virus immunizations still absolutely necessary.In comparison to current researches,a new virus immunization method the hierarchical virus immunization m... Due to the enormous harm of virus propagation,research regarding virus immunizations still absolutely necessary.In comparison to current researches,a new virus immunization method the hierarchical virus immunization method(HVIM) for community networks is proposed.Based on the virus transmission dynamic model SusceptibleInfectious-Removed and SusceptibleRemoved(SIRSR),HVIM considered the influence of external factors on the spread of viruses and only needs a portion of the network structure to be able to carry out immunization.Another pro for HVIM is that it is scalable and suitable for parallel computing which is a requirement in the big data era.Finally,a simulation dataset and a real dataset were used to run experiments,and the results of simulation showed that HVIM obviously is superior to others on the aspect of immunity. 展开更多
关键词 Community Networks VirusPropagation SIRSR Model HierarchicalVirus Immunization Method (HVIM)
下载PDF
Research on Parallel K-Medoids algorithm based on MapReduce
9
作者 Xianli QIN 《International Journal of Technology Management》 2015年第1期26-28,共3页
In order to solve the bottleneck problem of the traditional K-Medoids clustering algorithm facing to deal with massive data information at the time of memory capacity and processing speed of CPU, the paper proposed a ... In order to solve the bottleneck problem of the traditional K-Medoids clustering algorithm facing to deal with massive data information at the time of memory capacity and processing speed of CPU, the paper proposed a parallel algorithm MapReduce programming model based on the research of K-Medoids algorithm. This algorithm increase the computation granularity and reduces the communication cost ratio based on the MapReduce model. The experimental results show that the improved parallel algorithm compared with other algorithms, speedup and operation efficiency is greatly enhanced. 展开更多
关键词 K-Medoids MAPREDUCE Parallel computing HADOOP
下载PDF
Efficiency decomposition in parallel production systems with shared sources on interval data: An illustration of Iranian Banks
10
作者 Sohrab Kordrostami 《International Journal of Biomathematics》 2014年第5期229-235,共7页
In real-world applications, some systems are composed of independent production units that use different inputs to produce outputs. The conventional data envelopment analysis model measures the relative efficiencies o... In real-world applications, some systems are composed of independent production units that use different inputs to produce outputs. The conventional data envelopment analysis model measures the relative efficiencies of a set of decision-making units with exact values of both inputs and outputs. In this paper, we propose an approach to assess parallel production systems with shared sources and bounded interval data, and also we provide a model that focuses on calculating the efficiency of the whole of a system along with the efficiencies of its components. 展开更多
关键词 DEA parallel system efficiency decomposition interval data.
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部