課程介紹
項目全過程Hadoop沙盤模擬實戰(zhàn),通過一個完整的大數(shù)據(jù)開發(fā)項目及一組實際項目案例,完全覆蓋Hadoop開發(fā)過程的各個技術體系的實踐應用。該項目是一個課堂實踐項目,以項目小組的形式進行沙盤實操練習,重點在于強化理解Hadoop項目各個階段的工作重點,同時明確并強化作為項目管理者的一些基本素質。
培訓對象
設計、架構和開發(fā)Hadoop解決方案的開發(fā)人員;
進行Hadoop等云計算項目規(guī)劃的咨詢師;
要求具有一定linux操作基礎的IT相關人員。
課程收益
全面掌握Hadoop的架構原理和使用場景;
全程項目實戰(zhàn)訓練;
徹底掌握使用Hadoop進行MapReduce程序開發(fā);
熟悉分布式計算領域的常用算法;
掌握Hive、HBase使用與優(yōu)化技巧。
知識概要
-- Hadoop概要;
-- HDFS架構與原理;
-- Map/Reduce架構與原理;
-- Map/Reduce架構與原理;
-- HBASE架構與原理;
-- Hadoop輔助支持工具。
課程大綱
Hadoop概要
Hadoop生態(tài)系統(tǒng)介紹
Hadoop集群安裝與部署
Hadoop獨立部署
Hadoop偽分布式安裝部署
Hadoop集群安裝與部署
Hadoop配置參數(shù)管理
HDFS架構與原理
HDFS體系結構
HDFS讀寫過程-串行寫與并行讀
HDFS 管理接口-HDFS shell && HDFS Web Interface
HDFS開發(fā)與設計
HDFS API接口介紹
HDFS Java接口實例
HDFS開發(fā)實例-基于HDFS實現(xiàn)云盤系統(tǒng)
Map/Reduce架構與原理
Map/Reduce體系結構
Map/Reduce管理接口-Map/Reduce shell && Map/Reduce Web Interface
Map/Reduce開發(fā)與設計
Map/Reduce API接口介紹
Map/Reduce Java開發(fā)實例
HBASE架構與原理
HBASE體系結構
HBASE物理存儲
HBASE關鍵流程算法
HBASE管理接口-HBase Shell&& HBase Web Interface
HBASE與RDBMS的比較
HBASE開發(fā)與設計
HBASE API接口介紹
HBASE Java接口實例
HBASE優(yōu)化專題-海量數(shù)據(jù)寫入優(yōu)化
Hadoop輔助支持工具
Hive-SQL
Pig-通過腳本實現(xiàn)Map/Reduce
Sqoop
認證過程
無認證考試
開班信息
暫無開班信息