课程特色

紧扣主题、详略得当、提供在线大数据操作环境--是本课程的突出特点。为期2个多月的课程设置,内容充实且条理清晰,以打造符合一线城市IT企业技术要求的大数据工程师为最终目标,适合大专院校学生及在职人士参加。
此外,飞谷云团队还紧密结合大数据实际岗位需求,同期推出的还有“大数据运维工程师班”“Python+SparkML机器学习工程师班”

课程大纲

一、Linux搜索引擎技术(7课时)
第1课:Lucene简介及示例程序
第2课:创建索引和执行搜索
第3课:中文分词
第4课:Web搜索引擎实例
第5课:Solr-面向企业的搜索服务器
第6课:手动搭建一个支持中文的搜索引擎
第7课:访问Solr的Java客户端框架
二、Hadoop生态圈主要组件(15课时)
第1课:Python Scrapy框架基本应用及数据管道
第2课:Scrapy框架高级及图片爬虫
第3课:HDFS原理/框架结构/基本操作
第4课:HDFS JavaAPI介绍
第5课:MapReduce WordCount原理详解
第6课:如何在集群中运行和调试MR程序
第7课:MapReduce聚合算法示例
第8课:Hive原理及常用操作
第9课:Hive JavaAPI介绍
第10课:Hive自定义函数开发及使用
第11课:HBase原理及使用方法
第12课:HBase JavaAPI介绍/从Hive导入数据
第13课:Flume日志收集功能介绍
第14课:Flume NG版本介绍/数据落地到HDFS
第15课:SQOOP数据导入导出功能介绍
三、大数据流式计算(6课时)
第1课:Kafka基本概念/环境搭建/运行方式
第2课:Kafka主要组件及运行原理
第3课:Flume+Kafka+Hive实现日志数据处理
第4课:Storm特性/应用场景/包含组件
第5课:Kafka+Storm组件整合示例
第6课:Flink主要功能简介
四、spark内存计算(6课时)
第1课:Spark框架概述/核心模块
第2课:spark读取Hive数据源
第3课:Spark Java API介绍
第4课:python数据分析挖掘-1
第5课:python数据分析挖掘-2
第6课:Spark Streaming技术简介及示例

课时收费

  • 授课方式为线上直播,总共34次课,跨度2个月左右
  • 每周三、五晚上9点~10点半上课,每次上2节课,每周4个课时,每月总计16个课时
  • 每周日晚上9点为在线答疑时间
  • 参考教材为《自己动手做大数据系统》
  • 本期开班时间预定在2017年5月中旬,学员人数为50人
  • 费用为1299元/人。飞谷往届学员报名及推荐新学员报名,两人分别享受200元和100元优惠
  • 付款方式为支付宝转账:vzyuelei@126.com或微信转账:vzyuelei。请学员在报名后且我们电话核实后,再进行支付
  • 学员开课2周内可全额退款
  • 实操环境

    学员在学习期间可以方便地使用飞谷云提供的在线大数据环境,只要能上网,便可以随时登录环境进行代码调试,突破了本地搭建大数据环境的技术屏障。老师的教学演示及学员每次作业提交均基于本套环境。以下是后端集群环境服务器示意图,学员可以使用student用户直接登录到slave01节点上。

    讲师团队

    吴茂贵

    吴茂贵
    运筹学与控制论专业研究生学历。毕业后主要参与数据仓库、商务智能等方面的项目,期间做过数据处理、数据分析、数据挖掘等工作,行业涉及金融、物流、制造业等。近期主要做复杂数据存储、清理、转换等工作,同时在大数据方面也很有兴趣并投入大量时间和精力,且将持续为之。

    张粤磊

    张粤磊
    DBA、大数据架构师,十余年一线数据处理数据分析实战经验。先后在咨询、金融、互联网行业担任数据平台技术负责人或架构师。主要关注大数据基础平台、大数据模型构建和大数据分析。

    刘未昕

    刘未昕
    从事IT研发和项目管理工作十余年以上。使用多种程序设计语言,目前研究方向主要是大数据生态系统,从事金融、数据仓库等领域研发。五年以上IT行业授课、培训经验,并在多所高校担任外聘讲师。

    张魁

    张魁
    虚拟化工程师,Openstack架构师,苏州某高校云平台架构师,十余年Linux系统运维实践及虚拟化开发经验,4年Linux系统补丁开发经验。先后在美企担任虚拟化应用运维、服务器集群开发运维工程师或系统开发架构师,高校信息中心云平台架构师,主要关注Openstack、Docker及分布式存储等。

    我要报名

    您可以在此填写报名表格,提交后我们会和您取得联系。由于大数据培训对学员技术起点要求较高,为保证教学实效,我们会对学员报名资格进行筛选。(如想得到学费优惠,请正确填写推荐人姓名)