<source id="6i8ms"><optgroup id="6i8ms"></optgroup></source>
  • 你的位置: 首頁 > 公開課首頁 > 互聯網/語言 > 課程詳情

    details

    Storm大數據流式處理技術

    暫無評價   
    • 開課時間:2017年05月10日 09:00 周三 已結束
    • 結束時間:2017年05月12日 17:00 周五
    • 開課地點:北京市
    • 授課講師: 待定
    • 課程編號:331279
    • 課程分類:互聯網/語言
    •  
    • 收藏 人氣:362
    你實際購買的價格
    付款時最多可用0淘幣抵扣0元現金
    購買成功后,系統會給用戶帳號返回的現金券
    淘課價格
    5700
    可用淘幣
    0
    返現金券
    待定

    你還可以: 收藏

    培訓受眾:

    1,系統架構師、系統分析師、高級程序員、資深開發人員。

    2,牽涉到大數據處理的數據中心運行、規劃、設計負責人。

    3,政府機關,金融保險、移動和互聯網等大數據來源單位的負責人。

    4,高校、科研院所牽涉到大數據與分布式數據處理的項目負責人。

    課程收益:

    1, 全面了解大數據流式處理技術的相關知識。

    2,學習Storm的核心技術方法以及應用特征。

    3,深入使用Storm在大數據流式處理中的使用。

    4,掌握BDAS相關工具及其主要功能。

    培訓頒發證書:

    培訓結束,頒發“Storm大數據流式處理技術”結業證書。

    課程大綱:

    隨著互聯網、移動互聯網和物聯網的發展,我們已經切實迎來了大數據時代。大數據是指無法在一定時間內用常規軟件工具對其內容進行抓取、管理和處理的數據集合,對大數據的流式處理和分析已經成為一個非常重要且緊迫的需求。目前對大數據的流式處理和分析工具,業界公認最佳為Storm。Twitter將Storm正式開源了,這是一個分布式、容錯的實時計算系統,Storm可以方便地在一個計算機集群中編寫與擴展復雜的實時計算。Storm保證每個消息都會得到處理,在一個小集群中,每秒可以處理數以百萬計的消息,可以使用任意編程語言來做開發,事實上已成為當前互聯網企業主流的大數據流式處理工具。為解決廣大系統設計人員深入研究與開發大數據流式處理的需要,培訓中心特舉辦“Storm大數據流式處理技術”培訓班, 具體事宜通知如下:

    ?

    一、培訓對象

    1,系統架構師、系統分析師、高級程序員、資深開發人員。

    2,牽涉到大數據處理的數據中心運行、規劃、設計負責人。

    3,政府機關,金融保險、移動和互聯網等大數據來源單位的負責人。

    4,高校、科研院所牽涉到大數據與分布式數據處理的項目負責人。

    ?

    二、學員基礎

    1,對IT系統設計有一定的理論與實踐經驗。

    2,有一定的數據倉庫與大數據流式處理基礎知識。

    三、師資

    由業界知名計算專家親自授課:

    楊老師?? 主要研究網絡信息分析以及云計算相關技術,長期從事通信網管系統、網絡信息處理、商務智能(BI)以及電信決策支持系統的研究開發工作,主持和參與了多個國家和省部級基金項目,具有豐富的工程實踐及軟件研發經驗。

    ?

    四、培訓要點

    互聯網點擊數據、傳感數據、日志文件、具有豐富地理空間信息的移動數據和涉及網絡的各類評論,成為了海量信息的多種形式。當數據以成百上千TB不斷增長的時候,我們在內部交易系統的歷史信息之外,需要一種基于大數據流式處理和分析的決策模型和技術支持。

    大數據通常具有:數據體量(Volume)巨大,數據類型(Variety)繁多,價值(Value)密度低,處理速度(Velocity)快等四大特征。如何有效管理和高效處理這些大數據已成為當前亟待解決的問題。大數據流式處理意味著更嚴峻的挑戰,更好地管理和處理這些數據也將會獲得意想不到的收獲。

    Storm為分布式實時計算提供了一組通用原語,可被用于“流處理”之中,實時處理消息并更新數據庫。這是管理隊列及工作者集群的另一種方式。 Storm也可被用于“連續計算”(continuous computation),對數據流做連續查詢,在計算時就將結果以流的形式輸出給用戶。它還可被用于“分布式RPC”,以并行的方式運行昂貴的運算。

    本課程從大數據流式處理技術以及Storm實戰的角度,理論和實踐相結合,全方位地介紹Storm大數據流式處理工具的原理和內核。以案例分析的方式來幫助學員了解如何用BDAS系列工具來解決具體的問題,并介紹了從大數據中挖掘出有價值的信息的關鍵。

    本課程不是一個泛泛的理論性、概念性的介紹課程,而是針對問題討論解決方案的深入課程。教師對于上述領域有深入的理論研究與實踐經驗,在課程中將會針對這些問題與學員一起進行研究,在關鍵點上演示、實踐,以加深對于這些解決方案的理解。通過本課程學習,希望推動大數據相關的項目開發上升到一個新水平。

    ?

    五、培訓內容

    第一講 Storm大數據處理介紹

    ? 1)? 什么是Storm

    ? 2)?Storm的誕生

    ? 3)?Storm的成長

    ? 4)?Storm的優勢

    ? 5)?Storm的應用現狀和發展趨勢

    第二講 Storm配置和容錯機制

    ? 1)Storm基本概念

    ? 2)Storm的配置

    ? 3) 序列化(Serialization)

    ? 4) 容錯機制

    第三講 Storm可靠性及消息傳輸

    1)?可靠性機制

    2)?保證消息處理

    ? 3) ?消息傳輸機制

    ? 4) ?Storm生產與開發環境

    第四講 Storm拓撲及流分組

    ? 1)? 什么是拓撲

    ? 2)?TopologyBuilder

    ? 3)? 流分組

    ? 4)? 不同模式下運行拓撲

    ? 5)? 拓撲的常見模式

    第五講 Spout和Bolt詳解

    ??1) 可靠的與不可靠的消息

    ??2) Spout獲取數據的方式

    ??3) Bolt數據處理概述

    ??4) 可靠的與不可靠的Bolt

    ??5) 復合流與復合Anchoring

    第六講 分布式DPRC

    ? 1) ??DRPC TopologyBuilder

    ? 2)? 本地模式的DRPC

    ? 3)? 遠程模式的DRPC

    ? 4)? 一個復雜的DRPC例子

    ? 5)? 非線性DRPC

    第七講 Storm事務拓撲

    ? 1)? 什么是事務拓撲

    ? 2)? 事務拓撲的設計細節

    ? 3)? 事務拓撲的實現細節

    ? 4)? 事務拓撲API

    第八講 Storm中的Trident

    ?1)? Trident概述

    ? 2)?Trident API

    ? 3)?Trident的操作

    第九講 Trident的狀態

    1)Trident的狀態

    2)? 實現Trident Spout

    3)? Spout與State的聯系

    第十講 Storm企業應用

    ? 1) ?Storm應用在互聯網企業

    ? 2)?Storm在Twitter的應用

    ? 3)?Storm其它企業的應用

    ? 4)? 小結

    ?

    六、培訓目標

    1, 全面了解大數據流式處理技術的相關知識。

    2,學習Storm的核心技術方法以及應用特征。

    3,深入使用Storm在大數據流式處理中的使用。

    4,掌握BDAS相關工具及其主要功能。

    ?

    七、培訓時間、地點


    八、證書

    培訓結束,頒發“Storm大數據流式處理技術”結業證書。

    ?

    九、費用

    培訓費:5800元/人(含教材、證書、午餐、學習用具等)。住宿協助安排,費用自理。

    本課程名稱: Storm大數據流式處理技術

    查看更多:互聯網/語言公開課

    storm 大數據流式處理 相關的最新課程
    講師動態評分 與同行相比

    授課內容與課綱相符00%

    講師授課水平00%

    服務態度00%

    日日好好在线观看-日日啪 日日碰 嗷嗷啪