<optgroup id="1shr5"><small id="1shr5"><pre id="1shr5"></pre></small></optgroup>

    <track id="1shr5"></track>

        <optgroup id="1shr5"><li id="1shr5"></li></optgroup><legend id="1shr5"></legend><span id="1shr5"><output id="1shr5"></output></span>
        <track id="1shr5"><em id="1shr5"></em></track>
      1. 你的位置: 首頁 > 公開課首頁 > 項目管理 > 課程詳情

        details

        Hadoop大型應用開發

        暫無評價   
        • 開課時間:2013年04月26日 09:30 周五 已結束
        • 結束時間:2013年04月28日 17:00
        • 開課地點:北京市
        • 授課講師: 朱永春
        • 課程編號:216868
        • 課程分類:項目管理
        •  
        • 收藏 人氣:2407
        你實際購買的價格
        付款時最多可用0淘幣抵扣0元現金
        購買成功后,系統會給用戶帳號返回的現金券
        淘課價格
        4500
        可用淘幣
        0
        返現金券
        待定

        你還可以: 收藏

        培訓受眾:

        軟件工程師、數據庫開發人員、網絡后臺開發人員、運維人員等。學員要求有一定的Java編程基礎。

        課程收益:

        1. 全面掌握Hadoop的架構原理和使用場景;
        2. 全程項目實戰訓練;
        3. 徹底掌握使用Hadoop進行MapReduce程序開發;
        4. 熟悉分布式計算領域的常用算法;

        培訓頒發證書:

        1、工業和信息化部人才交流中心頒發的《全國信息化工程師》證書。
        2、中國信息化培訓中心頒發的《Hadoop高級架構師》證書。

        課程大綱:

        第一天

        第1個主題:Hadoop MapReduce
        1. Hadoop JobTracker 剖析
        2.Hadoop TaskTracker 剖析
        3.Hadoop 任務提交流程剖析
        第2個主題: Hadoop MapReduce Streaming編程
        1. Hadoop Streaming 和 Java MapReduce Api 差異
        2. 使用 MapReduce 實現數據庫功能
        第3個主題:MapReduce分布式程序
        1. MapReduce流程
        2.剖析一個MapReduce程序
        3.基本MapReduceAPI 概念
        4.驅動代碼 5.Mapper
        6.Reducer
        7.API 使用Eclipse進行快速開發
        8.新MapReduce API
        第4個主題:Hadoop 核心代碼剖析
        1. Hadoop Mapper 類核心代碼剖析
        2. Hadoop Reducer 類核心代碼剖析
        第5個主題:HDFS分布式文件系統編程
        1. Hadoop HDFS 剖析
        2. Hadoop NameNode 剖析
        3. Hadoop DataNode 剖析
        4. hadoop I/O 操作
        5. 使用Hadoop HDFS API對HDFS編程

        第二天

        第1個主題:Hadoop Mapreduce高級編程
        1.ToolRunner介紹
        2.使用MRUnit進行測試
        3.利用Combiners來減少中間數據
        4.使用Configure和Close方法來進行Map/Reduce設置和關閉
        5.編寫Partitioner來優化負載平衡
        6.直接訪問Hadoop分布式文件系統(HDFS)
        7.使用分布式緩存(Distributed Cache)
        第2個主題:MapReduce的優化
        1. map優化
        2. reduce優化
        3. 小文件優化

        第3個主題:MapReduce的任務調度
        1. Queue調度的使用
        2. 公平調度的使用
        3. 能力調度的使用
        第4個主題:MapReduce編程實戰
        1. Hadoop的join操作
        2. Hadoop的二次排序
        3. Hadoop的海量日志分析
        第5個主題:flume+hadoop日志收集實戰
        1. flume介紹
        2. flume核心組件講解
        3. flume自帶的組件分析
        4. flume二次開發實戰

        第三天

        第1個主題:Hadoop的來源和動機
        1.傳統大規模系統存在的問題
        2.對一種新的解決方案的需求
        第2個主題:Hadoop安裝和部署準備
        1. Hadoop系統模塊組件概述
        2. Hadoop試驗集群的部署結構
        3. Hadoop 安裝依賴關系
        4. Hadoop 生產環境的部署結構
        第3個主題:Hadoop集群安裝和部署
        1. Red hat Linux基礎環境搭建 上機實驗
        2. Hadoop 單機系統版本 安裝配置 上機實驗
        3. Hadoop 集群系統版本 安裝和啟動配置 上機實驗
        4. Hadoop 集群異常Debug 方法
        5. Hadoop 集群簡單測試方法
        6. 使用 Hadoop MapReduce Streaming 快速測試系統
        第4個主題:Hadoop組件詳解
        1. Hadoop HDFS 基本結構
        2. Hadoop HDFS 副本存放策略
        3. Hadoop NameNode 詳解
        4. Hadoop SecondaryNameNode 詳解
        5. Hadoop DataNode 詳解
        6. Hadoop JobTracker 詳解
        7. Hadoop TaskTracker 詳解
        第5個主題:Hadoop集群配置詳解
        1. Hadoop core-site,hdfs-site,mapred-site 配置詳解
        2. Hadoop 高可用配置方法
        第1個主題:Hadoop集群配置:機架感知,開啟壓縮和任務均衡
        Hadoop 集群安裝和開啟LZO壓縮
        Hadoop 配置集群具備機架感知
        Hadoop 集群開啟公平任務調度器
        Hadoop 集群開啟能力任務調度器
        第2個主題:Hadoop 集群維護與管理
        查看集群狀態
        HDFS數據管理
        Mapreduce 任務管理
        HDFS安全模式
        模擬集群Namenode,jobtrack失效
        添加刪除節點
        數據平衡
        文件數據跨集群拷貝
        集群升級
        第3個主題:Hadoop 集群規劃和測試
        集群規劃(硬件,系統,網絡)
        集群性能測試
        第4個主題:Hadoop 集群監控和運維
        1. 使用Ganglia 監控Hadoop集群
        2. 使用Cacti 監控操作系統
        第5個主題:Hadoop HDFS高可用
        Hadoop 元數據NFS備份方案
        Hadoop SecondaryNameNode備份方案
        Hadoop CheckpointNode備份方案
        Hadoop BackupNode備份方案
        Hadoop Cloudera HA Namenode 方案

        培訓師介紹:

         
        國內最早從事于Hadoop框架應用程序軟件開發以及Hadoop解決方案專家。業界知名資深IT技術培訓講師、多家著名公司的技術顧問。

        本課程名稱: Hadoop大型應用開發

        查看更多:項目管理公開課

        Hadoop 相關的最新課程
        講師動態評分 與同行相比

        授課內容與課綱相符00%

        講師授課水平00%

        服務態度00%

        人人草色播基地