期刊导航
期刊开放获取
河南省图书馆
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
基于大数据处理平台的计算任务调度的配置优化
下载PDF
职称材料
导出
摘要
研究介绍了基于大数据处理平台的MapReduce编程模型,并分别从单个计算机任务执行中资源配置问题及多个计算机任务执行相关资源配置优化问题进行全面分析,并通过实例分析了资源配置对MapReduce计算任务执行情况的影响,实践证明,其能够提升MapReduce计算任务性能。
作者
贾丽娜
机构地区
武汉船舶职业技术学院计算机信息技术学院
出处
《电脑编程技巧与维护》
2021年第1期106-107,127,共3页
Computer Programming Skills & Maintenance
关键词
大数据
MapReduce计算任务
任务调度
资源配置
优化
性能
分类号
TP311.13 [自动化与计算机技术—计算机软件与理论]
引文网络
相关文献
节点文献
二级参考文献
39
参考文献
8
共引文献
65
同被引文献
0
引证文献
0
二级引证文献
0
参考文献
8
1
宋丹丹,翟俊海,李艳,齐家兴.
MapReduce和Spark两种框架下的大数据极限学习机比较研究[J]
.小型微型计算机系统,2020,41(7):1381-1388.
被引量:8
2
翟俊海,张明阳,王陈希,刘晓萌,王耀达.
基于MapReduce和上采样的两类非平衡大数据集成分类[J]
.数据采集与处理,2018,33(3):416-425.
被引量:3
3
廖彬,张陶,于炯,黄静莱,国冰磊,刘炎.
多MapReduce作业协同下的大数据挖掘类算法资源效率优化[J]
.计算机应用研究,2020,37(5):1321-1325.
被引量:31
4
李果,袁小凯,许爱东,张乾坤,张福铮.
基于MapReduce的人工蜂群算法在大数据中的应用[J]
.计算机与数字工程,2020,48(1):124-129.
被引量:3
5
孙德才,王晓霞.
一种基于MapReduce的大数据集相似自连接算法[J]
.计算机科学,2017,44(5):20-25.
被引量:3
6
李洪涛,郭俐君,郭锋,王洁,张问银.
基于MapReduce模型的城市大数据采集隐私保护方案[J]
.通信学报,2018,39(A02):35-43.
被引量:7
7
吕国,肖瑞雪,白振荣,孟凡兴.
大数据挖掘中的MapReduce并行聚类优化算法研究[J]
.现代电子技术,2019,42(11):161-164.
被引量:19
8
姚楠,彭敦陆.
MapReduce架构下的大规模轨迹数据压缩策略[J]
.小型微型计算机系统,2017,38(5):941-945.
被引量:2
二级参考文献
39
1
张瑞,郑诚,陈娟娟.
关联规则挖掘中的隐私保护研究[J]
.计算机技术与发展,2008,18(10):13-15.
被引量:5
2
孟小峰,慈祥.
大数据管理:概念、技术与挑战[J]
.计算机研究与发展,2013,50(1):146-169.
被引量:2377
3
黄斌,许舒人,蒲卫.
基于MapReduce的数据挖掘平台设计与实现[J]
.计算机工程与设计,2013,34(2):495-501.
被引量:45
4
陈东明,刘健,王冬琦,徐晓伟.
基于MapReduce的分布式网络数据聚类算法[J]
.计算机工程,2013,39(7):76-82.
被引量:9
5
张敏.
海量数据的MapReduce相似度检测[J]
.实验室研究与探索,2014,33(9):132-136.
被引量:4
6
时俊萍,陈杰.
一种智能电网中具有隐私保护的数据收集方案[J]
.电力信息与通信技术,2014,12(11):19-23.
被引量:4
7
庞俊,于戈,许嘉,谷峪.
基于MapReduce框架的海量数据相似性连接研究进展[J]
.计算机科学,2015,42(1):1-5.
被引量:16
8
余伟,李石君,杨莎,胡亚慧,刘晶,丁永刚,王骞.
Web大数据环境下的不一致跨源数据发现[J]
.计算机研究与发展,2015,52(2):295-308.
被引量:24
9
田波,丁祥武.
MR-DC:基于MapReduce的轻量级数据压缩策略[J]
.智能计算机与应用,2015,5(1):77-80.
被引量:3
10
吉根林,赵斌.
时空轨迹大数据模式挖掘研究进展[J]
.数据采集与处理,2015,30(1):47-58.
被引量:40
共引文献
65
1
陈建煊.
利益相关者管理[J]
.经济管理,2000,26(4):58-58.
被引量:3
2
骆金维,曾德生,郭雅,黄富平.
时序数据并行压缩速率改进技术研究[J]
.电子设计工程,2018,26(20):98-101.
被引量:5
3
陈志忠.
数据挖掘算法在云平台应用中的优化与实施[J]
.电子元器件与信息技术,2019,0(3):8-11.
被引量:8
4
高超,薛毓强,林雨丰.
基于时间常数的直流配电网故障测距方案[J]
.电器与能效管理技术,2019,0(22):68-76.
被引量:1
5
杨丽君.
基于云计算的数据挖掘聚类算法研究[J]
.数字通信世界,2020(5):131-131.
被引量:1
6
黄容生,张乾坤,李果,黄世平.
基于国密算法的隐私信息采集过程加密系统[J]
.自动化与仪器仪表,2020(9):212-215.
7
何南.
云计算下环形网络大数据协同挖掘方法分析[J]
.数码设计,2020,9(12):9-9.
8
李孜颖,石振国.
面向大数据任务的调度方法[J]
.计算机应用,2020,40(10):2923-2928.
被引量:12
9
史媛.
基于文本信息的SparkSQL处理研究[J]
.电子技术与软件工程,2020(15):213-214.
被引量:1
10
赵彦,孙俊.
一种并行化的改进型灰狼分簇算法[J]
.电讯技术,2020,60(10):1214-1221.
被引量:1
1
郑红星,隋延清,贺国燕.
集装箱码头海侧作业资源配置的仿真优化[J]
.计算机仿真,2020,37(6):136-141.
2
郝晋渊,孙丹丹,郝真鸣,陈凡,冉宁.
基于标签Petri网的自动制造系统初始资源配置优化[J]
.电子测量与仪器学报,2020,32(8):30-36.
被引量:9
3
张玉帅,赵欢,李博.
基于BERT和BiLSTM的语义槽填充[J]
.计算机科学,2021,48(1):247-252.
被引量:5
4
彭雅欣,黄琦,余明晖,杨杰,苏厚胜.
基于作战环境配置资源的出动架次率计算模型[J]
.水下无人系统学报,2020,28(6):642-649.
被引量:4
电脑编程技巧与维护
2021年 第1期
职称评审材料打包下载
相关作者
内容加载中请稍等...
相关机构
内容加载中请稍等...
相关主题
内容加载中请稍等...
浏览历史
内容加载中请稍等...
;
用户登录
登录
IP登录
使用帮助
返回顶部