Taiwan Hadoop Forum

台灣 Hadoop 技術討論區
現在的時間是 2018-12-13, 02:29

所有顯示的時間為 UTC + 8 小時




發表新文章 回覆主題  [ 3 篇文章 ] 
發表人 內容
 文章主題 : Hadoop Cluster set up
文章發表於 : 2013-11-18, 08:17 
離線

註冊時間: 2013-06-09, 22:45
文章: 7
各位先進您好

請問 Hadoop Cluster 架設
一般書籍都是教使用者利用 ssh + ssh-keygen 來說明『兩台』機器的cluster 架設
但是如果要架設4,8,16,32台PC所組成的cluster
這種設定方法可能會有問題?
( 需要PC多對多的設定!)

請問是否有多台電腦 PC cluster (e.g. 8 nodes, 16 nodes)設定的參考資料?

先行致謝!


回頂端
 個人資料 E-mail  
 
 文章主題 : Re: Hadoop Cluster set up
文章發表於 : 2013-11-18, 16:10 
離線

註冊時間: 2009-11-09, 19:52
文章: 2897
jdwang 寫:
各位先進您好
請問 Hadoop Cluster 架設
一般書籍都是教使用者利用 ssh + ssh-keygen 來說明『兩台』機器的cluster 架設
但是如果要架設4,8,16,32台PC所組成的cluster
這種設定方法可能會有問題?
( 需要PC多對多的設定!)
請問是否有多台電腦 PC cluster (e.g. 8 nodes, 16 nodes)設定的參考資料?
先行致謝!


手動設定發生問題的機率比較高,但熟悉 Linux 操作的人應該可以自行排解。
當然隨著機器愈來愈多,管理上的複雜度也愈高,因此需要比較多叢集管理的工具。
亦因此,目前業界其實都有開發這一類支援自動安裝叢集的工具,
http://www.cloudera.com/content/cloudera/en/products/cloudera-manager.html
http://hortonworks.com/products/hdp/
http://www.mapr.com/products/mapr-editions/m3-edition
國網目前是採用 DRBL 來佈署 hadoop,成果就是目前提供服務的 http://hadoop.nchc.org.tw
國內則有 SYSTEX Etu 提供軟硬體 Appliance 來降低門檻。

- Jazz


回頂端
 個人資料 E-mail  
 
 文章主題 : Re: Hadoop Cluster set up
文章發表於 : 2013-11-18, 17:44 
離線

註冊時間: 2013-06-09, 22:45
文章: 7
Dear Jazz,

Thanks for your information!


回頂端
 個人資料 E-mail  
 
顯示文章 :  排序  
發表新文章 回覆主題  [ 3 篇文章 ] 

所有顯示的時間為 UTC + 8 小時


誰在線上

正在瀏覽這個版面的使用者:沒有註冊會員 和 1 位訪客


不能 在這個版面發表主題
不能 在這個版面回覆主題
不能 在這個版面編輯您的文章
不能 在這個版面刪除您的文章
不能 在這個版面上傳附加檔案

搜尋:
前往 :  
cron
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
正體中文語系由 竹貓星球 維護製作