?決勝大數(shù)據(jù)時(shí)代：Hadoop&Yarn&Spark企業(yè)級(jí)最佳實(shí)踐培訓(xùn)課程
培訓(xùn)內(nèi)容
第一部分
1、Hadoop三問(wèn)（徹底理解Hadoop）
2、Hadoop集群與管理（具備構(gòu)建并駕馭Hadoop集群能力）
3、徹底掌握HDFS(具備開發(fā)自己網(wǎng)盤的能力)
4、徹底掌握HDFS(具備修改HDFS具體源碼實(shí)現(xiàn)的能力)
第二部分
1、徹底掌握MapReduce（從代碼的角度剖析MapReduce執(zhí)行的具體過(guò)程并具備開發(fā)MapReduce代碼的能力）
2、徹底掌握MapReduce（具備掌握Hadoop如何把HDFS文件轉(zhuǎn)化為Key-Value讓供Map調(diào)用的能力）
3、徹底掌握MapReduce（具備掌握MapReduce內(nèi)部運(yùn)行和實(shí)現(xiàn)細(xì)節(jié)并改造MapReduce的能力）
4、Hadoop集群高級(jí)實(shí)踐(具體Hadoop企業(yè)管理員的實(shí)際能力)
第三部分
1、實(shí)戰(zhàn)ZooKeeper（具備理解并通過(guò)命令行和Java兩種方式操作ZooKeeper的能力）
2、實(shí)戰(zhàn)HBase（具備掌握HBase企業(yè)級(jí)開發(fā)和管理的能力）
3、實(shí)戰(zhàn)Pig（具備掌握Pig企業(yè)級(jí)開發(fā)和管理的能力）
4、實(shí)戰(zhàn)Hive(具備掌握Hive企業(yè)級(jí)開發(fā)和管理的能力)
第四部分
1、實(shí)戰(zhàn)Sqoop（具備使用Sqoop自由轉(zhuǎn)換傳統(tǒng)關(guān)系型數(shù)據(jù)庫(kù)和HDFS中數(shù)據(jù)的能力）
2、實(shí)戰(zhàn)Flume（具備使用Flume收集和管理分布式日志的能力）
3、Hadoop系統(tǒng)管理進(jìn)階（具備掌握MapReduce內(nèi)部運(yùn)行和實(shí)現(xiàn)細(xì)節(jié)并改造MapReduce的能力）
4、電信日志項(xiàng)目（具備掌握Hadoop完整項(xiàng)目的分析、開發(fā)、部署的全過(guò)程的能力）
5、某知名電商公司Hadoop實(shí)施全程揭秘（具備掌握商業(yè)級(jí)別Hadoop的分析、開發(fā)、部署的全過(guò)程的能力）
第五部分
1、YARN（具備理解和使用YARN的能力）
2、Yarn資源調(diào)度器（具備理解和使用YARN的能力）
3、ResourceManager深度剖析（具備深刻理解ResourceManager的能力）
4、NodeManager深度剖析（具備掌握NodeManager及Container的能力）
第六部分
1、Spark的架構(gòu)設(shè)計(jì)(具備掌握Spark架構(gòu)的能力)
2、Spark編程模型(具備掌握編程核心的能力)
3、深入Spark內(nèi)核(具備掌握Spark內(nèi)核的能力)
4、Spark的廣播變量與累加器(具備掌握Spark廣播和累加器的能力)
5、Spark多語(yǔ)言編程(具備掌握多語(yǔ)言編程的能力)
6、SparkContext解析和數(shù)據(jù)加載以及存儲(chǔ)(具備掌握Spark加載以處理數(shù)據(jù)的能力)
第七部分
7、深入實(shí)戰(zhàn)RDD(具備掌握Spark?RDD深入處理計(jì)算和優(yōu)化計(jì)算的能力)
8、Shark的原理和使用(具備掌握Shark用于數(shù)據(jù)分析統(tǒng)計(jì)的能力)
9、Spark的機(jī)器學(xué)習(xí)(具備掌握Spark的機(jī)器學(xué)習(xí)的能力)
10、Spark的圖計(jì)算GraphX(具備掌握Spark圖計(jì)算的能力)
11、Spark?SQL(具備掌握Spark?SQL進(jìn)行的能力)
第八部分
12、Spark實(shí)時(shí)流處理(具備掌握Spark?實(shí)時(shí)流處理技術(shù)的能力)
13、Spark程序的測(cè)試(具備掌握Spark程序測(cè)試的能力)
14、Spark的優(yōu)化(具備掌握Spark優(yōu)化的能力)
15、Spark?on?Yarn(具備掌握Spark?on?Yarn的能力)
16、JobServer(具備掌握Spark?as?a?cloud?service的能力)
17、Spark項(xiàng)目案例實(shí)戰(zhàn)(具備掌握Spark項(xiàng)目進(jìn)行數(shù)據(jù)處理的能力)
?
