課程介紹
項目全過程Hadoop沙盤模擬實戰,通過一個完整的大數據開發項目及一組實際項目案例,完全覆蓋Hadoop開發過程的各個技術體系的實踐應用。該項目是一個課堂實踐項目,以項目小組的形式進行沙盤實操練習,重點在于強化理解Hadoop項目各個階段的工作重點,同時明確并強化作為項目管理者的一些基本素質。
培訓對象
設計、架構和開發Hadoop解決方案的開發人員;
進行Hadoop等云計算項目規劃的咨詢師;
要求具有一定linux操作基礎的IT相關人員。
課程收益
全面掌握Hadoop的架構原理和使用場景;
全程項目實戰訓練;
徹底掌握使用Hadoop進行MapReduce程序開發;
熟悉分布式計算領域的常用算法;
掌握Hive、HBase使用與優化技巧。
知識概要
-- Hadoop概要;
-- HDFS架構與原理;
-- Map/Reduce架構與原理;
-- Map/Reduce架構與原理;
-- HBASE架構與原理;
-- Hadoop輔助支持工具。
課程大綱
Hadoop概要
Hadoop生態系統介紹
Hadoop集群安裝與部署
Hadoop獨立部署
Hadoop偽分布式安裝部署
Hadoop集群安裝與部署
Hadoop配置參數管理
HDFS架構與原理
HDFS體系結構
HDFS讀寫過程-串行寫與并行讀
HDFS 管理接口-HDFS shell && HDFS Web Interface
HDFS開發與設計
HDFS API接口介紹
HDFS Java接口實例
HDFS開發實例-基于HDFS實現云盤系統
Map/Reduce架構與原理
Map/Reduce體系結構
Map/Reduce管理接口-Map/Reduce shell && Map/Reduce Web Interface
Map/Reduce開發與設計
Map/Reduce API接口介紹
Map/Reduce Java開發實例
HBASE架構與原理
HBASE體系結構
HBASE物理存儲
HBASE關鍵流程算法
HBASE管理接口-HBase Shell&& HBase Web Interface
HBASE與RDBMS的比較
HBASE開發與設計
HBASE API接口介紹
HBASE Java接口實例
HBASE優化專題-海量數據寫入優化
Hadoop輔助支持工具
Hive-SQL
Pig-通過腳本實現Map/Reduce
Sqoop
認證過程
無認證考試
開班信息
暫無開班信息