網頁

2012年4月17日 星期二

[雲端]2012-04-17 初建雲端系統hadoop


從開學以來建立ubuntu(其實很熟練了)

一直到後面開始載入hadoop

才開始進入了雲端系統的世界

發現原來 使用desktop版本 還是有他的好處(有gedit...)....





hadoop相關資料:

1.Hadoop
 -本來是Apache.org在Lucene下的一個專案,由Dong Cutting所開發。
 -用來處理與保存大量資料的雲端運算平台。
 -Apache top-level 專案。
 -是一個開放源始碼的分散式計算系統的JAVA實作,可協助處理大規模的資料集(Data Sets)。
 -一套實現Google Map Reduce及GFS(Google File System)的工具。
 -Map就是將一個工作分到多個Node。
 -Reduce就是將各個Node的結果再重新結合成最後的結果。
 -運算的部分以Map Reduce為架構。
 -特色:分散式運算、運算加速及運算節點備援具穩定性。
 -使用的檔案系統:HDFS。
 -使用的儲存系統:Hbase。
轉自 此處


Web Interface 可以看出一些端倪..





初次建立後 在網頁輸入localhost:50030

可以看到雲端是有架起來的(成功)



由於剛架起來..還未有JOB..



在bin底下 輸入jps 應該可以看到六個東西

如果少一樣就是有問題了





沒有留言:

張貼留言

注意:只有此網誌的成員可以留言。

Site Meter