銆€銆€鏈功鏄竴鏈郴缁熶笖鏋佸叿瀹炶返鎸囧鎰忎箟鐨刪adoop宸ュ叿涔﹀拰鍙傝€冧功銆傚唴瀹瑰叏闈紝瀵筯adoop鏁翠釜鎶€鏈綋绯昏繘琛屼簡鍏ㄩ潰鐨勮瑙ｏ紝涓嶄粎鍖呮嫭hdfs鍜宮apreduce杩欎袱澶ф牳蹇冨唴瀹癸紝鑰屼笖杩樺寘鎷琱ive銆乭base銆乵ahout銆乸ig銆亃ookeeper銆乤vro銆乧hukwa绛変笌hadoop鐩稿叧鐨勫瓙椤圭洰鐨勫唴瀹广€傚疄鎴樻€у己锛屼负鍚勪釜鐭ヨ瘑鐐圭簿蹇冭璁′簡澶ч噺缁忓吀鐨勫皬妗堜緥锛屾槗浜庣悊瑙ｏ紝鍙搷浣滄€у己銆?br />銆€銆€鍏ㄤ功涓€鍏?8绔狅細绗?绔犲叏闈粙缁嶄簡hadoop鐨勬蹇点€佷紭鍔裤€侀」鐩粨鏋勩€佷綋绯荤粨鏋勶紝浠ュ強瀹冧笌鍒嗗竷寮忚绠楃殑鍏崇郴锛涚2绔犺缁嗚瑙ｄ簡hadoop闆嗙兢鐨勫畨瑁呭拰閰嶇疆锛屼互鍙婂父鐢ㄧ殑鏃ュ織鍒嗘瀽鎶€宸э紱绗?绔犲垎鏋愪簡hadoop鍦▂ahoo锛併€乪bay銆乫acebook鍜岀櫨搴︾殑搴旂敤妗堜緥锛屼互鍙奾adoop骞冲彴涓婃捣閲忔暟鎹殑鎺掑簭锛涚4-7绔犳繁鍏ュ湴璁茶В浜唌apreduce璁＄畻妯″瀷銆乵apreduce搴旂敤

鍓嶈█
绗?绔犮€€Hadoop绠€浠?br />聽 1.1聽 浠€涔堟槸Hadoop
聽聽聽 1.1.1聽 Hadoop姒傝堪
聽聽聽 1.1.2聽 Hadoop鐨勫巻鍙?br />聽聽聽 1.1.3聽 Hadoop鐨勫姛鑳戒笌浣滅敤
聽聽聽 1.1.4聽 Hadoop鐨勪紭鍔?br />聽聽聽 1.1.5聽 Hadoop鐨勫簲鐢ㄧ幇鐘跺拰鍙戝睍瓒嬪娍
聽 1.2聽 Hadoop椤圭洰鍙婂叾缁撴瀯
聽 1.3聽 Hadoop鐨勪綋绯荤粨鏋?br />聽聽聽 1.3.1聽 HDFS鐨勪綋绯荤粨鏋?br />聽聽聽 1.3.2聽 MapReduce鐨勪綋绯荤粨鏋?br />聽 1.4聽 Hadoop涓庡垎甯冨紡寮€鍙?br />聽 1.5聽 Hadoop璁＄畻妯″瀷鈥斺€擬aDRcduce
聽 1.6 Hadoop鐨勬暟鎹鐞?br />聽聽聽 1.6.1聽 HDFS鐨勬暟鎹鐞?br />聽聽聽 1.6.2聽 HBase鐨勬暟鎹鐞?br />聽聽聽 1.6.3聽 Hive鐨勬暟鎹鐞?br />聽 1.7聽 灏忕粨
绗?绔犅?Hadoop鐨勫畨瑁呬笌閰嶇疆
聽 2.1聽 鍦↙inux涓婂畨瑁呬笌閰嶇疆Hadoop
聽聽聽 2.1.1聽 瀹夎JDK 1.6
聽聽聽 2.1.2聽 閰嶇疆SSH鍏嶅瘑鐮佺櫥褰?br />聽聽聽 2.1.3瀹夎骞惰繍琛孒adoop
聽 2.2聽 鍦╓indows涓婂畨瑁呬笌閰嶇疆Hadoop
聽聽聽 2.2.1聽 瀹夎Cygwi~
聽聽聽 2.2.2聽 閰嶇疆鐜鍙橀噺
聽聽聽 2.2.3聽 瀹夎鍜屽惎鍔╯shd鏈嶅姟
聽聽聽 2.2.4聽 閰嶇疆SSH鍏嶅瘑鐮佺櫥褰?br />聽 2.3聽 瀹夎鍜岄厤缃瓾adoop闆嗙兢
聽聽聽 2.3.1聽 缃戠粶鎷撴墤
聽聽聽 2.3.2聽 瀹氫箟闆嗙兢鎷撴墤
聽聽聽 2.3.3聽 寤虹珛鍜屽畨瑁匔luster
聽 2.4聽 鏃ュ織鍒嗘瀽鍙婂嚑涓皬鎶€宸?br />聽 2.5聽 灏忕粨
绗?绔犅?Hadoop搴旂敤妗堜緥鍒嗘瀽
聽 3.1聽 Hadoop鍦╕ahoo!鐨勫簲鐢?br />聽 3.2聽 Hadoop鍦╡Bay鐨勫簲鐢?br />聽 3.3聽 Hadoop鍦ㄧ櫨搴︾殑搴旂敤
聽 3.4聽 Hadoop鍦‵acebook

銆€銆€绗?绔犮€€Hadoop绠€浠?br />銆€銆€1锛?聽 浠€涔堟槸Hadoop
銆€銆€1锛?锛?聽 Hadoop姒傝堪
聽聽聽Hadoop鏄疉pache杞欢鍩洪噾浼氭棗涓嬬殑涓€涓紑婧愬垎甯冨紡璁＄畻骞冲彴銆備互Hadoop鍒嗗竷寮忔枃浠剁郴缁?HDFS锛孒adoopDistributed Filesystem)鍜孧apReduce(GoogleMapReduce鐨勫紑婧愬疄鐜?涓烘牳蹇冪殑Hadoop涓虹敤鎴锋彁渚涗簡绯荤粺搴曞眰缁嗚妭閫忔槑鐨勫垎甯冨紡鍩虹鏋舵瀯銆侶DFS鐨勯珮瀹归敊鎬с€侀珮浼哥缉鎬х瓑浼樼偣鍏佽鐢ㄦ埛灏咹adoop閮ㄧ讲鍦ㄤ綆寤夌殑纭欢涓婏紝褰㈡垚鍒嗗竷寮忕郴缁燂紱MapReduce鍒嗗竷寮忕紪绋嬫ā鍨嬪厑璁哥敤鎴峰湪涓嶄簡瑙ｅ垎甯冨紡绯荤粺搴曞眰缁嗚妭鐨勬儏鍐典笅寮€鍙戝苟琛屽簲鐢ㄧ▼搴忋€傛墍浠ョ敤鎴峰彲浠ュ埄鐢℉adoop杞绘澗鍦扮粍缁囪绠楁満璧勬簮锛屼粠鑰屾惌寤鸿嚜宸辩殑鍒嗗竷寮忚绠楀钩鍙帮紝骞朵笖鍙互鍏呭垎鍒╃敤闆嗙兢鐨勮绠楀拰瀛樺偍鑳藉姏锛屽畬鎴愭捣閲忔暟鎹殑澶勭悊銆?br />銆€銆€1锛?锛?聽 Hadoo