jdwang 寫:
各位先進您好
請問 Hadoop Cluster 架設
一般書籍都是教使用者利用 ssh + ssh-keygen 來說明『兩台』機器的cluster 架設
但是如果要架設4,8,16,32台PC所組成的cluster
這種設定方法可能會有問題?
( 需要PC多對多的設定!)
請問是否有多台電腦 PC cluster (e.g. 8 nodes, 16 nodes)設定的參考資料?
先行致謝!
手動設定發生問題的機率比較高,但熟悉 Linux 操作的人應該可以自行排解。
當然隨著機器愈來愈多,管理上的複雜度也愈高,因此需要比較多叢集管理的工具。
亦因此,目前業界其實都有開發這一類支援自動安裝叢集的工具,
http://www.cloudera.com/content/cloudera/en/products/cloudera-manager.htmlhttp://hortonworks.com/products/hdp/http://www.mapr.com/products/mapr-editions/m3-edition國網目前是採用 DRBL 來佈署 hadoop,成果就是目前提供服務的
http://hadoop.nchc.org.tw國內則有 SYSTEX Etu 提供軟硬體 Appliance 來降低門檻。
- Jazz