大数据与Spark实战

大数据与Spark实战
一级 二级 细节1 细节2
任务1 (前导) 学习方法 　 　
需求分析 　 　
所用工具安装与配置 　 　
敏捷开发 　 　
DevOPS 　 　
任务2 (Hadoop) (概述) 概述 起源与历史 　
图解生态系统 　
文件系统 架构
文件系统访问
JavaAPI接口
I/O系统 文件数据结构
文件序列化
MR工作原理 MR框架结构
Shuffle和Sort
基于Linux的搭建方式(概述) 　 　
一线应用方式 Java+MR 　
sqoop+Hive 　
sqoop+Hive+HBase 　
任务3 (Spark) 起源与历史 　 　
架构组成 　 　
安装与配置 　 　
与Hadoop的本质差别 　 　
基于Scala的SparkShell的使用 　 　
任务4 (SparkSQL) 历史发展 　 　
性能 　 　
运行架构 catalyst 　
sqlContext 　
hiveContext 　
组件解析 　 　
运行过程 hive/console 　
基础应用 sqlContext的RDD 　
Json 　
hiveContext使用 　
高级应用 TriftServer和CLI 　
JDBC访问sparkSQL数据 　
综合应用 店铺分类 使用sparkSQL和MLLib 　
PageRank计算最有价值的网页 使用sparkSQL和GraphX 　
Hive On Spark 　 　
任务5 (SparkStreaming) SparkSQL与SparkStreaming结合 完成实时的日志数据统计 　 　
Flume+Kafka+SparkStreaming+SparkSQL 　 　
任务6 (总结) 现实中基于SparkSQL与SparkStreaming 一线应用总结 　 　
实时计算展望 　 　 

天津大学(双本)
英语、德语
微软认证讲师
微软金牌讲师4年德国留学
15年应用开发和数据处理从业经历
国内使用Python作为数据处理工具的先行者
曾任职阿里担任架构师、搜狐担任软件工程师
参与多个大型项目、为全国各个培训机构提供需求分析、各类软件开发、软件架构

专业背景
软件服务外包开发公司(开发以及团队管理)经验
曾任职阿里担任架构师 3年
搜狐担任软件工程师 2年
天津经济技术开发区政府部门软件系统开发维护经验(开发以及团队管理)
德国留学4年
天津经济技术开发区大型制造型企业内部软件平台开发维护经验
15年培训行业经验
主要课程
《软件全栈开发》
《Linux 应用与发展》
《大数据 与Spark实战》
《Python程序编码语言培训》
《面向架构师的互联网平台架构设计》
《微服务架构与技术》
《基于大数据的企业运维》
《Android8.0项目开发实战》
强项授课

授课特点：
课程都是实战性课程,培训的宗旨是要进行课程的落地，通过接地气的项目实战，来使培训者能够从一个小项目入手，然后逐步扩大自己的视觉，完成最后的实战开发，以下的内容有别于以往的纯技术点授课！
讲师授课感受：
1.技术在于分享,用心做好每一件事情
2.不能忽悠受众者
3.授课前需要了解客户的课程后的真实的需求
4.根据用户的需求来有针对性的制定有效的课程大纲
5.加强课程的互动性，每天的课程每个受众者平均会沟通至少10次以上
6.根据情况会安排所有的受众者撰写每日的培训日志总结
7.课堂上需要随机应变和现场发挥，来解答受众者的问题，对于未能解答的问题保留相关的联系方式寻求在24-48小时内给出有效的解决方案
8.课堂上某些案例可以根据受众者的实际的最终需求来模拟编写，这样，在课程结束后，受众者会有一个大体的需求完成的轮廓
9.对一些该技术领域的新技术的总结和探索
10.一切不变的就是变化，所有的内容会切以实际的以需求为准来应对 

• 大数据及人工智能背景下消费和小微信贷线上获客、产品设计、风控应对策略

   

  第一部分：金融科技发展状况的介绍一、金融科技的现状与发展趋势（一）宏观背景1、金融科技（支付宝人脸识别技术、APPLEPAY、虹膜技术、二维码支付技术）2、利率市场化3、金融脱媒（二）移动互联技术的发展使互联网金融成为可能1、移动互联网技术2、移动支付技术3、H5、APP（三）互联网金融对传统银行资产业务的颠覆和冲..

  ￥   元/ 天

  人气：665  

  

• 大数据时代——提升患者管理，构建专业药房

   

  【课程导言】：移动互联时代下，实体门店面临巨大的挑战，同时也是一种机会。马云说：不是实体门店不行了，而是你的实体门店不行了。面临新的冲击实体店如何进行创新，如何守住老阵地，如何利用新武器，这是所有实体连锁共同面临的问题。课程从互联网环境对我们的实体店挑战和我们面临的消费者消费习惯和方式的的变化入手，通过分析新零售良品铺子，海澜之家，名创优品的..

  ￥   元/ 天

  人气：554  

  

• 电商互联网大数据营销之落地实践铁律

   

  课程背景：未来人货场一切数字化，数据将成为一种资源，没有数据没有未来，企业如何构建自己的大数据未来？人工智能已经来临，人工智能在营销板块的应用本质就是大数据营销！企业的ERP、CRM、报表等等仅仅是零散的死数据，如何激活流动产生闭环，产生效益？经验将成为负债，未来将利用数据产品规划、定位、策划、人群分析、活动策划，数据成为商业的起点！人为..

  ￥19,100   元/ 天

  人气：957  

  

• 电商互联网智能商业：大数据营销分析与落地实践

   

  课程背景：数据是未来企业唯一资源，大数据营销意味着高效、精准、成本低、全自动化，让企业从人海战、广告战、渠道战的泥潭中拔出来为什么搜索广告效果差了？为什么团购效果也差了？为什么传统的用户细分、STP在大数据提出的用户画像面前苍白了？为什么独角兽全靠增长黑客模式崛起？企业未来如何搭建科学的大数据营销队伍，建立科学的数字营销体！通过互动获取数据，..

  ￥19,100   元/ 天

  人气：995  

  

• 大数据基础原理与应用

   

  一、运营商网络架构和技术选择1.运营商网络架构2.运营商业务类型3.接入网技术选择4.不同业务的技术实现二、全业务运营技术实现1.集团业务分类及特点2.集团高等级业务特点及业务场景3.集团低等级业务特点及业务场景4.集团高、低等级业务要求及技术选择5.数据专线业务及技术实现6.互联网专线业务及技术实现7.集..

  ￥   元/ 天

  人气：827  

  

• 大数据、物联网、云计算行业应用及发展趋势

   

  一、信息通信产业发展的背景和趋势1、信息通信产业用户现状和发展趋势2、国内外信息化发展战略3、中国信息化发展现状和趋势4、信息通信网络发展趋势5、电信业转型新趋势二、ICT前沿技术(一)云计算1、云计算发展的商业动力与技术趋势1.1云计算基本概念1.2云计算的商业动力：企业ICT转型1.3云计算特点..

  ￥   元/ 天

  人气：929