?MapReduce2.0源碼分析與編程實戰(zhàn)培訓(xùn)

課程大綱：

第1章　大象也會跳舞

1.1　大數(shù)據(jù)時代　

1.2　大數(shù)據(jù)分析時代　

1.3　簡單、粗暴、有效這就是Hadoop　

1.4　MapReduce與Hadoop　

1.5　看，大象也會跳舞　

第2章　大象的肚子HDFS文件系統(tǒng)詳解

2.1　HDFS基礎(chǔ)詳解　

2.2　HDFS數(shù)據(jù)存取流程分析　

2.3　HDFS命令行操作詳解　

2.4　通過Web瀏覽HDFS文件　

2.5　HDFS接口使用詳解　

2.6　HDFS文件同步與并發(fā)訪問　

第3章　“吃下去吐出來”Hadoop文件I/O系統(tǒng)詳解

3.1　Hadoop的壓縮類型介紹　

3.2　Hadoop的壓縮類庫　

3.3　I/O中序列化類型詳解　

3.4　實現(xiàn)自定義的Writable類型　

3.5　Hadoop中小文件處理詳解　

第4章　“大象的大腦”MapReduce框架結(jié)構(gòu)與源碼分析

4.1　MapReduce框架結(jié)構(gòu)與源碼分析　

4.2　編程實戰(zhàn)：經(jīng)典的MapReduce單詞計數(shù)程序　

第5章　深入！MapReduce配置與測試

5.1　MapReduce環(huán)境變量配置詳解　

5.2　使用MRUnit對MapReduce進(jìn)行測試　

5.3　在本地磁盤上進(jìn)行MapReduce測試　

5.4　MapReduce計數(shù)器　

第6章　大象的思考流程MapReduce運(yùn)行流程詳解

6.1　經(jīng)典MapReduce任務(wù)的工作流程　

6.2　經(jīng)典MapReduce任務(wù)異常處理詳解　

6.3　經(jīng)典MapReduce任務(wù)的數(shù)據(jù)處理過程　

6.4　MapReduce?2.0(YARN)工作流程詳解　

第7章　更強(qiáng)的大象MapReduce高級程序設(shè)計續(xù)

7.1　MapReduce程序設(shè)計默認(rèn)格式類型詳解　

7.2　InputFormat輸入格式詳解　

7.3　OutputFormat輸出格式詳解　

7.4　多種輸入與輸出使用介紹　

第8章　MapReduce相關(guān)特性詳解

8.1　MapReduce計數(shù)器　

8.2　排序與查找　

8.3　對輸出結(jié)果的值分組排序　

8.4　編程實戰(zhàn)：使用二次排序自動查找最小值　

第9章　啤酒與尿布MapReduce連接與數(shù)據(jù)挖掘初步

9.1　對于同樣格式數(shù)據(jù)進(jìn)行MapReduce連接　

9.2　對于不同格式數(shù)據(jù)進(jìn)行MapReduce連接　

9.3　不能說的秘密啤酒與尿布　

9.4　數(shù)據(jù)挖掘初步　

第10章　MapReduce實戰(zhàn)編程及深度分析

10.1　編程實戰(zhàn)：自定義數(shù)據(jù)庫中讀取數(shù)據(jù)　

10.2　編程實戰(zhàn)：串聯(lián)尋找共同轉(zhuǎn)載微博　

10.3　編程實戰(zhàn)：云存儲模型　

10.4　編程實戰(zhàn)：多文檔相似關(guān)鍵字檢索　

10.5　編程實戰(zhàn)：學(xué)生成績整理與分組