期刊文献+
共找到6篇文章
< 1 >
每页显示 20 50 100
面向地震数据处理的并行与分布式编程框架 被引量:16
1
作者 赵长海 晏海华 +2 位作者 王宏琳 史晓华 王雷 《石油地球物理勘探》 EI CSCD 北大核心 2010年第1期146-155,共10页
本文提出了一个适用于地震资料处理的并行与分布式编程框架GeoPF。该框架构建在集群系统之上,采用粗粒度数据并行执行模型,它可以调度串行语言编写的处理模块,同时运行在多个计算节点或者单个节点内的多个CPU核上,隐藏了计算节点及其CP... 本文提出了一个适用于地震资料处理的并行与分布式编程框架GeoPF。该框架构建在集群系统之上,采用粗粒度数据并行执行模型,它可以调度串行语言编写的处理模块,同时运行在多个计算节点或者单个节点内的多个CPU核上,隐藏了计算节点及其CPU核的调度、通讯与节点故障恢复、模块之间的数据传输等并行编程细节。经过实验评估,GeoPF框架从串行到并行的线性加速性能有所提高,处理相同任务的时间从21h33min缩减到15min27s,效果显著。GeoPF与商用的地震数据处理系统相比,在业务流程方面有一些相同特点,其不同之处就是GeoPF的处理模块具有自动并行特点,而大部分地震处理模块只能是串行方式。 展开更多
关键词 并行执行模型 地震数据处理 编程框架 分布式 计算节点 地震资料处理 数据处理系统 串行方式
下载PDF
一种分布对象的并行程序设计框架 被引量:2
2
作者 王晨 周颖 张德富 《软件学报》 EI CSCD 北大核心 1999年第3期310-316,共7页
计算性能和合成性能对于基于工作站网的软件十分重要,但由于缺乏相应的开发环境,现在这类软件在这两方面还做得很不够,尤其是合成性能十分薄弱.该文提出并实现了一种基于分布对象的并行程序设计框架,力图使分布对象能提供高性能的... 计算性能和合成性能对于基于工作站网的软件十分重要,但由于缺乏相应的开发环境,现在这类软件在这两方面还做得很不够,尤其是合成性能十分薄弱.该文提出并实现了一种基于分布对象的并行程序设计框架,力图使分布对象能提供高性能的并行计算服务,同时也使并行算法获得一种良好的封装和复用机制.经过一些并行算法的测试。 展开更多
关键词 分布对象 并行程序设计 工作站网 框架
下载PDF
基于Dotnet Remoting技术实现Windows平台下的并行计算 被引量:1
3
作者 刘鸿 巫骏 +1 位作者 康昆 梅燕 《物探化探计算技术》 CAS CSCD 2007年第5期468-472,共5页
分布式并行计算是目前提高计算能力的重要手段,在生产、科研中起着重要的作用。Windows平台下的NET Framework Remoting技术,为开发分布式并行计算提供了方便、灵活、简单的手段,可以屏蔽分布式编程所需要处理的通信、协议、消息传输等... 分布式并行计算是目前提高计算能力的重要手段,在生产、科研中起着重要的作用。Windows平台下的NET Framework Remoting技术,为开发分布式并行计算提供了方便、灵活、简单的手段,可以屏蔽分布式编程所需要处理的通信、协议、消息传输等细节,使分布式编程与本地编程具有相同的界面,为本地计算和远程分布式计算提供了一个一致的面向对象的编程环境,使开发分布式计算如同开发本地计算一样,这就大大降低了开发分布式并行计算的难度。这里主要介绍了如何利用NET Framework Remoting技术,实现Windows平台下的并行计算。 展开更多
关键词 NET framework 并行计算 分布式计算 程序设计 Windows
下载PDF
面向节点异构GPU集群的编程框架 被引量:3
4
作者 盛冲冲 胡新明 +1 位作者 李佳佳 吴百锋 《计算机工程》 CAS CSCD 北大核心 2015年第2期292-297,共6页
基于异构GPU集群的主流编程方法是MPI与CUDA的混合编程或者其简单变形。因为对底层的集群架构不透明,程序员对GPU集群采用MPI与CUDA编写应用程序时需要人为考虑硬件计算资源,复杂度高、可移植性差。为此,基于数据流模型设计和实现面向... 基于异构GPU集群的主流编程方法是MPI与CUDA的混合编程或者其简单变形。因为对底层的集群架构不透明,程序员对GPU集群采用MPI与CUDA编写应用程序时需要人为考虑硬件计算资源,复杂度高、可移植性差。为此,基于数据流模型设计和实现面向节点异构GPU集群体系结构的新型编程框架分布式并行编程框架(DISPAR)。DISPAR框架包含2个子系统:(1)代码转换系统Stream CC,是DISPAR源代码到MPI+CUDA代码的自动转换器。(2)任务分配系统Stream MAP,具有自动发现异构计算资源和任务自动映射功能的运行时系统。实验结果表明,该框架有效简化了GPU集群应用程序的编写,可高效地利用异构GPU集群的计算资源,且程序不依赖于硬件平台,可移植性较好。 展开更多
关键词 GPU集群 异构 分布式并行编程框架 代码转换 任务分配 可移植性
下载PDF
Hadoop平台下的并行Web日志挖掘算法 被引量:6
5
作者 周诗慧 殷建 《计算机工程》 CAS CSCD 2013年第6期43-46,共4页
当面对海量数据时,基于单一节点的Web数据挖掘存在时间和空间效率上的瓶颈。针对该问题,提出一种在Hadoop平台下实现Web日志挖掘的并行FP-growth算法,利用Hadoop分布式文件系统和MapReduce并行计算模型处理日志文件。实验结果表明,该算... 当面对海量数据时,基于单一节点的Web数据挖掘存在时间和空间效率上的瓶颈。针对该问题,提出一种在Hadoop平台下实现Web日志挖掘的并行FP-growth算法,利用Hadoop分布式文件系统和MapReduce并行计算模型处理日志文件。实验结果表明,该算法的加速比能随着数据集的增大而提高,其执行效率优于串行FP-growth算法。 展开更多
关键词 Hadoop框架 WEB挖掘 WEB日志 MapReduce编程模式 HADOOP分布式文件系统 并行FP-growth算法
下载PDF
SEIP: System for Efficient Image Processing on Distributed Platform
6
作者 刘弢 刘轶 +4 位作者 李钦 王香荣 高飞 朱延超 钱德沛 《Journal of Computer Science & Technology》 SCIE EI CSCD 2015年第6期1215-1232,共18页
Nowadays, there exist numerous images in the Internet, and with the development ot cloud compuung ano big data applications, many of those images need to be processed for different kinds of applications by using speci... Nowadays, there exist numerous images in the Internet, and with the development ot cloud compuung ano big data applications, many of those images need to be processed for different kinds of applications by using specific image processing algorithms. Meanwhile, there already exist many kinds of image processing algorithms and their variations, while new algorithms are still emerging. Consequently, an ongoing problem is how to improve the efficiency of massive image processing and support the integration of existing implementations of image processing algorithms into the systems. This paper proposes a distributed image processing system named SEIP, which is built on Hadoop, and employs extensible in- node architecture to support various kinds of image processing algorithms on distributed platforms with GPU accelerators. The system also uses a pipeline-based h'amework to accelerate massive image file processing. A demonstration application for image feature extraction is designed. The system is evaluated in a small-scale Hadoop cluster with GPU accelerators, and the experimental results show the usability and efficiency of SEIP. 展开更多
关键词 big data distributed system image processing GPU parallel programming framework
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部