大数据运维(hadoop/spark)企业级培训
课程介绍
讲解hadoop和spark的工作原理和部署方法,测试大数据程序的执行,对各种任务和资源进行管理。
学员要求
学习了前置课程《ubuntu linux系统管理》 或者有linux系统管理经验,对进程运行环境、linux磁盘管理、网络管理、服务管理熟悉。
课程长度
3天(21学时)
培训时间
2017年3月20日-22日
授课方式
面授+远程直播+ hadoop/spark e-leaning
课程内容
*一天:
单节点的hadoop安装部署和测试
hadoop命令
文件系统管理工具
多节点的hadoop的安装部署和测试
第二天:
hadoop存储结点的管理
集群扩容和缩减
yarn的配置
mapreduce编程模型和代码测试
计算任务管理
第三天:
spark的部署
spark存储管理
spark编程模型和代码测试
spark计算任务管理