柚子快報激活碼778899分享：大數(shù)據(jù) Hadoop學習

http://yzkb.51969.com/

1.HDFS命令行解釋

2.HDFS命令行常用操作

3.HDFS各角色職責介紹

SecondaryNameNode不能代替NameNode，只起輔助作用

4.HDFS寫數(shù)據(jù)流程

HDFS寫數(shù)據(jù)流程

即有一份復(fù)制成功就算寫入完成

5.MapReduce介紹

MR缺點：

實時計算性能差不能進行流式計算

6.Map階段執(zhí)行過程

7.Reduce執(zhí)行過程

一般默認只有一個ReduceTask（和前面Map階段的分區(qū)可能有關(guān)），不同的Key也會被同一個ReduceTask處理，只不過處理之前會按照key進行分組，相同的key會調(diào)用一次reduce方法

8.Shuffle機制

柚子快報激活碼778899分享：大數(shù)據(jù) Hadoop學習

http://yzkb.51969.com/

文章來源