大数据技术下面向企业需求的高校应用型人才培养课程体系设计

围绕如何面向企业需求进行高校应用型人才培养课程体系设计,借力大数据应用技术,分析网络招聘信息,针对人才培养方案设计核心问题,介绍课程体系设计的整体思路与设计及实现过程,并以广州商学院数据科学与大数据技术专业人才培养方案设计过程为例,提出高校工程类型应用型人才培养课程体系设计时,可模仿借鉴的大数据分析技术实现方案。

Hadoop大数据平台自动化运维工具Ambari部署及应用

针对Hadoop集群部署和维护的复杂性,分析了手工部署和工具部署各自的优缺点,提出了基于Ambari平台的快速安装部署一套Hadoop3.x分布式集群实践方案,并讨论了自动化部署要点及步骤。基于Ambari工具完成了Hadoop生态圈HDFS、Zookeeper、HBase、Hive等组件安装部署后,进行应用环境性能测试。实践结果表明,相比较于传统手工>24 h部署,基于Ambari快速部署可以在<5 h内轻松完成,大大提高了集群部署的时间效率及成功率,极大方便大数据教学以及大数据用户行为分析平台、大数据推荐系统和大数据仓库平台等各种业务生产环境部署。