大数据实训方案.doc

。

大数据实训教学大纲

一、实训目标
基于Hadoop为核心，通过实训，达成以下目的：
Ø 认识大数据，认识大数据技术在新时代对企业的重要性。
Ø 掌握 Linux的基础知识和应用
Ø 掌握hadoop集群环境的搭建。
Ø 熟悉HDFS分布式文件系统的原理，掌握HDFS的API的开发。
Ø 通过实际案例的开发，了解MapReduce原理，掌握MapReduce的开发技术。
Ø 了解Hive，学习Hive集群的搭建。掌握Hive的DML和DDL相关技术。
Ø 认识ZooKeeper，学些ZooKeeper集群的搭建，了解ZooKeeper在Hadoop集群中的作用。
Ø 了解HBase原理和架构，掌握HBase API编程，掌握HBase数据的导入和导出。
Ø 通过综合案例实践，掌握Hadoop以及相关框架的开发和应用。

二、实训课程内容介绍
1、 课程大纲
项目实战
技能培训
项目阶段
任务分解说明
任务
说明
项目启动
实习总动员
项目管理培训
1、 学生分组
2、 通过案例初步认识大数据
技术速成
Linux入门
技术培训
1、Linux简介、安装
2、常用命令
3、文件权限及操作
4、用户及权限管理
5、Linux下搭建Java开发环境
Hadoop入门
1、Hadoop介绍
2、Hadoop安装配置
3、hadoop初始化和测试
4、配置ssh免密码登陆配置和ssh原理
HDFS
1、HDFS原理
2、HDFS的shell操作
3、HDFS原理
4、HDFS的java接口
5、Hadoop RPC
6、HDFS读取数据过程

Map-Reduce
1、MR介绍
2、WordCount执行流程和代码编写
3、MR排序
4、Combiner编程
5、shuffle过程

Hive
1、Hive入门安装
2、DDL数据定义语言
3、DML数据操作语言
4、Hive安装mysql metastore
5、Hive分区表
6、Hive的UDF
7、倒排索引

ZooKeeper
1、ZooKeeper介绍
2、ZooKeeper客户端使用
3、hadoop集群搭建
4、Hadoop集群测试

Hbase
1、HBase入门
2、HBaseJava编程
3、Hbase架构讲解
4、MR on Hbase
5、Hive on Hbase
6、Hbase集群管理
7、Hbase数据导入
8、Hbase备份与恢复
项目验收准备
1、 制定验收规则
2、 如何制作PPT
3、 如何演说
发布总结
项目验收
项目验收、关闭
经验总结
1、   项目验收与评分
2、  项目关闭：总结项目经验与教训
3、 职业规划

THANKS !!!

致力为企业和个人提供合同协议，策划案计划书，学习课件等等
打造全网一站式需求

欢迎您的下载，资料仅供参考

-可编辑修改-