实战基于开源平台的大数据开发与运维

时间 一级 二级 细节
第1天上午 任务1 (思想) 前导与模拟项目 　
学习方法 　
敏捷开发 　
所需工具 相关的镜像设备进行发放
课程技术描述 Linux与Hadoop
HDFS
Java+MapReduce
Hive+Sqoop+Hadoop+mysql
Hive+Sqoop+Hbase+mysql
JavaWeb+Hadoop
Hadoop+Spark+SparkSQL
Flume+Kafka+Spark+Spark Streaming
任务2 (大数据技术点) Hadoop-Spark(Storm)发展历史 　
大数据厂商对比 Apache
Cloudera
Hortonworks
开源大数据的一线场景 　
现场讨论 　
任务3 (Linux与Hadoop2) Linux历史、目前实用版本 　
概述基于Linux集群的Hadoop2的安装与配置 　
Hadoop的Web界面的介绍 　
基于Hadoop2的Linux实用命令介绍 　
现场实战 　
任务4 (HDFS) 主要功能 　
架构与运行方式 　
关键技术 NameNode
DataNOde
Java与HDFS API 　
现场实战 　
第1天下午 任务5 (MapReduce) 主要工作方式理解 　
官方wordCount的MR分析 　
实战Java+MapReduce 员工工资求和的MR计算
员工工资求平均的MR计算
模仿并改造自己的项目 　
任务6 (开源平台介绍) 运维管理HUE平台 　
运维管理Ambari平台 　
运维系统Ganglia、Nagios的应用 　
任务7 (Hadoop生态系统 其他软件介绍) Hive 是什么?
概述配置
能解决什么一线问题
经常和那些软件结合
Sqoop 是什么?
概述配置
能解决什么一线问题
经常和那些软件结合
Hbase 是什么?
概述配置
能解决什么一线问题
经常和那些软件结合
第2天上午 Flume 是什么?
概述配置
能解决什么一线问题
经常和那些软件结合
Kafka 是什么?
概述配置
能解决什么一线问题
经常和那些软件结合
任务8 (Hive+Sqoop+Hadoop+mysql) 能解决什么问题？ 　
实战1抽取数据到Hadoop,调用Hive来查询 　
实战2之将HDFS的结果写回到MySQL 　
模仿并改造自己的项目 　
任务9 (Hive+Sqoop+Hbase+mysql) 能解决什么问题？ 　
实战1抽取数据到HBase,调用Hive来查询 　
实战2之将HBase的结果写回到MySQL 　
模仿并改造自己的项目 　
第2天下午 任务10 (JavaWeb+Hadoop) 能解决什么问题？ 　
实战1使用JavaWeb读取Hadoop的结果并进行图表展现 　
模仿并改造自己的项目 　
任务11 (Hadoop+Spark+SparkSQL) 能解决什么问题？ 　
实战1之SparkSQL对海量数据的访问 　
模仿并改造自己的项目 　
任务12 (Flume+Kafka+Spark+Spark Streaming) 能解决什么问题？ 　
实战1之基于内存的流计算 　
模仿并改造自己的项目 　
任务13 (拓展) 基于Spark Mlib的算法数据分析 　
介绍Tensorflow 　
介绍Caffee 　
Spark新技术、AI面向未来应用 　 

天津大学(双本)
英语、德语
微软认证讲师
微软金牌讲师4年德国留学
15年应用开发和数据处理从业经历
国内使用Python作为数据处理工具的先行者
曾任职阿里担任架构师、搜狐担任软件工程师
参与多个大型项目、为全国各个培训机构提供需求分析、各类软件开发、软件架构

专业背景
软件服务外包开发公司(开发以及团队管理)经验
曾任职阿里担任架构师 3年
搜狐担任软件工程师 2年
天津经济技术开发区政府部门软件系统开发维护经验(开发以及团队管理)
德国留学4年
天津经济技术开发区大型制造型企业内部软件平台开发维护经验
15年培训行业经验
主要课程
《软件全栈开发》
《Linux 应用与发展》
《大数据 与Spark实战》
《Python程序编码语言培训》
《面向架构师的互联网平台架构设计》
《微服务架构与技术》
《基于大数据的企业运维》
《Android8.0项目开发实战》
强项授课

授课特点：
课程都是实战性课程,培训的宗旨是要进行课程的落地，通过接地气的项目实战，来使培训者能够从一个小项目入手，然后逐步扩大自己的视觉，完成最后的实战开发，以下的内容有别于以往的纯技术点授课！
讲师授课感受：
1.技术在于分享,用心做好每一件事情
2.不能忽悠受众者
3.授课前需要了解客户的课程后的真实的需求
4.根据用户的需求来有针对性的制定有效的课程大纲
5.加强课程的互动性，每天的课程每个受众者平均会沟通至少10次以上
6.根据情况会安排所有的受众者撰写每日的培训日志总结
7.课堂上需要随机应变和现场发挥，来解答受众者的问题，对于未能解答的问题保留相关的联系方式寻求在24-48小时内给出有效的解决方案
8.课堂上某些案例可以根据受众者的实际的最终需求来模拟编写，这样，在课程结束后，受众者会有一个大体的需求完成的轮廓
9.对一些该技术领域的新技术的总结和探索
10.一切不变的就是变化，所有的内容会切以实际的以需求为准来应对