課程目標(biāo)

這是一套 系統(tǒng)且具有很強(qiáng)實(shí)戰(zhàn)性 的Storm課程，從實(shí)時(shí)流計(jì)算及其在新浪、騰訊、360、百度等公司應(yīng)用分析，到Storm的架構(gòu)、工作流、機(jī)制，再到Storm集群的部署、運(yùn)行、監(jiān)控，最后以某上市婚戀網(wǎng)站的真實(shí)項(xiàng)目做為案例來詳細(xì)講解并帶領(lǐng)大家完成從理論到實(shí)戰(zhàn)的進(jìn)階！
眾所周知，Hadoop在處理海量數(shù)據(jù)方面有著強(qiáng)大的能力，但是只能進(jìn)行離線數(shù)據(jù)分析，而Storm可以幫助我們實(shí)現(xiàn)實(shí)時(shí)流式計(jì)算，因此Storm被譽(yù)為“實(shí)時(shí)的Hadoop”。
對(duì)于學(xué)員來說，在掌握了Hadoop的基礎(chǔ)上，再學(xué)會(huì)Storm，簡直如虎添翼，在大數(shù)據(jù)行業(yè)里面會(huì)有更強(qiáng)的競(jìng)爭(zhēng)力。

 師資團(tuán)隊(duì)

華清創(chuàng)客企業(yè)內(nèi)訓(xùn)講師，均是來自各個(gè)領(lǐng)域的資深專家，均擁有6年以上大型項(xiàng)目經(jīng)驗(yàn)。

 培養(yǎng)對(duì)象

1、技術(shù)出身，了解基本的研發(fā)思想即可。
2、小型企業(yè)的技術(shù)負(fù)責(zé)人；
3、大中型企業(yè)的數(shù)據(jù)部門相關(guān)人員、或是對(duì)數(shù)據(jù)感興趣的其他部門的研發(fā)總監(jiān)、部門經(jīng)理、一線研發(fā)工程師等人員均可；

 培訓(xùn)方式

• 第一種：華清創(chuàng)客講師面授
  課時(shí)：共3天，每天6學(xué)時(shí)，總計(jì)18學(xué)時(shí)
  ◆費(fèi)用（含教材費(fèi)）：4500元
  ◆外地學(xué)員：代理安排食宿（需提前預(yù)定）
  
  第二種：線上直播授課
  直播課時(shí)：共6天，每天3學(xué)時(shí)，總計(jì)18學(xué)時(shí)；
  輔導(dǎo)：授課期間，輔導(dǎo)老師每天有1小時(shí)的輔導(dǎo)直播
  ◆費(fèi)用（含教材費(fèi)）：4500元
  
  第三種：企業(yè)訂制培訓(xùn)
  課時(shí)：根據(jù)定制的大綱確定課時(shí)
  費(fèi)用：根據(jù)課程難度，每課時(shí)1500~3000元

  
  

   質(zhì)量保證

• 1、培訓(xùn)過程中，如有部分內(nèi)容理解不透或消化不好，可免費(fèi)在下期培訓(xùn)班中重聽；

  2、培訓(xùn)結(jié)束后免費(fèi)提供一個(gè)月的技術(shù)支持，充分保證培訓(xùn)后出效果；

  3、培訓(xùn)合格學(xué)員可享受免費(fèi)推薦就業(yè)機(jī)會(huì)。

•  課程大綱

  第一章：初級(jí)階段 第一節(jié)：實(shí)時(shí)流式計(jì)算介紹 實(shí)時(shí)流式計(jì)算是什么

  實(shí)時(shí)流式計(jì)算的特點(diǎn)

  實(shí)時(shí)流式計(jì)算使用場(chǎng)景分析

  Queue+Worker，S4, Storm，Spark簡單介紹

  第二節(jié)：認(rèn)識(shí)Storm Storm介紹

  Storm特點(diǎn)

  Storm優(yōu)勢(shì)

  第三節(jié)：Storm使用場(chǎng)景 新浪的實(shí)時(shí)分析平臺(tái)

  騰訊的實(shí)時(shí)計(jì)算平臺(tái)

  奇虎360的實(shí)時(shí)平臺(tái)

  百度的實(shí)時(shí)系統(tǒng)

  阿里的Jstorm

   

  第二章：中級(jí)階段 第四節(jié)：Storm的系統(tǒng)架構(gòu) 主節(jié)點(diǎn)（Nimbus）

  從節(jié)點(diǎn)（Supervisor）

  Web節(jié)點(diǎn)（Storm UI）

  協(xié)調(diào)節(jié)點(diǎn)（Zookeeper）

  第五節(jié)：Storm的工作流 作業(yè)單元（Topology）

  數(shù)據(jù)源編程單元（Spout）

  數(shù)據(jù)處理編程單元（Bolt）

  第六節(jié)：Storm的并發(fā)機(jī)制 服務(wù)器（Nodes）

  JVM虛擬機(jī)（Worker）

  線程（Executor）

  Spout/Bolt實(shí)例（Task）

  第七節(jié)：Storm的數(shù)據(jù)流 Stream講解（Tuple）

  Storm的數(shù)據(jù)模型

  Stream Grouping

  第八節(jié)：Storm的保障機(jī)制 功能性保障：多粒度的并行化

  非功能性保障：多級(jí)別的可靠性

   

  第三章：高級(jí)階段 第九節(jié)：Zookeeper講解 Zookeeper介紹

  基礎(chǔ)系統(tǒng)安裝

  JAVA安裝

  Zookeeper搭建

  Zookeeper狀態(tài)查看命令

  第十節(jié)：Storm部署 Storm版本發(fā)展歷史

  本地模式

  分布式模式

  主節(jié)點(diǎn)Nimbus

  工作節(jié)點(diǎn)Supervisor

  Storm UI

  Storm配置項(xiàng)

  第十一節(jié)：項(xiàng)目如何在Storm集群下運(yùn)行 Storm Java API

  Topology創(chuàng)建與提交

  Example

  第十二節(jié)：Kafka講解 Kafka介紹

  Kafka的消息持久化和順序讀寫

  Kafka的應(yīng)用

  Kafka的客戶端

  Storm和Kafka的對(duì)接：KafkaSpout

  第十三節(jié)：Storm集群的監(jiān)控與管理 主機(jī)信息監(jiān)控

  日志監(jiān)控

  Storm UI

   

  第四章：項(xiàng)目實(shí)戰(zhàn) 第十四節(jié)：業(yè)務(wù)背景 案例背景

  設(shè)計(jì)目標(biāo)

  分析需求

  第十五節(jié)：系統(tǒng)架構(gòu)與模塊設(shè)計(jì) 整體架構(gòu)

  數(shù)據(jù)源

  數(shù)據(jù)存儲(chǔ)與處理

  第十六節(jié)：核心模塊實(shí)現(xiàn) 模擬數(shù)據(jù)實(shí)現(xiàn)

  日志采集和存儲(chǔ)實(shí)現(xiàn)

  數(shù)據(jù)處理實(shí)現(xiàn)

  第十七節(jié)：項(xiàng)目部署上線 上線大致流程

  注意事項(xiàng)

  監(jiān)控

  第十八節(jié)：DRPC DRPC構(gòu)建與使用

  DRPC原理

  第十九節(jié)：Trident Trident介紹

  用Trident實(shí)現(xiàn)可靠的實(shí)時(shí)word統(tǒng)計(jì)

  第二十節(jié)：多語言開發(fā) 多語言開發(fā)介紹

  Python舉例