Taiwan Hadoop Forum

目前已經將namenode 裝在虛擬機上了 但是在hbase上還是遇到沒有hmaster的問題
按照前面貼的網站http://www.haogongju.net/art/1042661 做 獨立安裝zookeeper 為什麼可以和hbase錯開裝
這樣不會有影響嗎
重新說明安裝環境
00 (192.168.158.135) hadoop hbase zookeeper（按照網站說的先在這台將hadoop hbase zookeeper安裝設定完 在丟到個別需要的電腦）
01 (192.168.158.136) hadoop hbase
02 (192.168.158.138) hadoop hbase zookeeper
03 (192.168.158.139) hbase zookeeper
04 (192.168.158.141) zookeeper

無密碼設置是在 00上和 01（02, 03, 04)間可用
在hbase.site上是這樣設定
<property>
<name>hbase.rootdir</name>
<value>hdfs://192.168.158.135:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.master</name>
<value>192.168.158.136</value>
</property>
執行hbase時要在 00 還是 01 底下？
也就是說啟動hbase是要在namenode下還是 hmaster下
我看過有些網站的namenode和 hmaster都在同一台
但是依照此網站是不同的耶
另外zookeeper的部份 有某個網站說要把zoo.cfg複製到hbase.classpath
但是我找不到hbase.classpath這個東西

不好意思 我的問題稍微多了一些 請指教 謝謝

老實說，我裝 HBase 0.20.6 的時候不用獨立裝 ZooKeeper (因為內含在 HBase 0.20.6 了)
HBase 0.90.3 是否要獨立裝，我就不確定了。



理論上只要設定檔正確，hbase shell 是透過 ZooKeeper 去問哪一台是 HMaster，所以不限定 hbase shell 在哪一台上執行。



當初在 0.20.6 的時候，不用自己設定 zookeeper，所以不必做這樣的動作。hbase.classpath 應該是只 HBase 安裝路徑的 lib 。

- Jazz

PS. 附件是兩隻在 Ubuntu 上安裝 Hadoop 1.0.3 跟 HBase 0.20.6 的 script，對於 HBase 0.90.3 合不合用，待確認。
建議您先在單機可以跑成功。我正在跑 Hadoop 1.0.3 + HBase 0.94.1 (目前 stable 版)

剛試過 Ubuntu 12.04 + Hadoop 1.0.3 + HBase 0.94.1 單機版是 OK 的
更新 install-hbase 腳本如附件。至於叢集版喔，等我有空再修了~
前陣子有寫一隻 hicloud-hadoop 的腳本，可以在多台 VM 或 hicloud VM 裝好 Hadoop。
還沒加入 HBase 安裝。下載： 0.0.1 alpha 版
原始碼： http://github.com/jazzwang/hicloud-hadoop
當然因為 hicloud 現在是 Ubuntu 10.04 正常還可以加 partner repository
但是 Ubuntu 12.04 的 VM 就會發生 Java Runtime 裝不起來的問題(這是 Ubuntu 不願意再提供 sun-java6-jdk 套件造成的)。

當然可以每台都跑單機版一次，然後做一個動作。


接著修改設定檔把 /opt/hadoop/conf/core-site.xml 的 localhost 改成 NameNode 的 IP
把 /opt/hbase/conf/hbase-site.xml 的 localhost 改成 NameNode 的 IP

在 NameNode 那台下

在 JobTracker 那台下

在 HMaster 那台下

在要跑 DataNode 的每一台跑

在要跑 TaskTracker 的每一台跑

在要跑 ZooKeeper 的每一台跑

在要跑 RegionServer 的每一台跑


- Jazz

http://hadoop.nchc.org.tw/phpbb/viewtopic.php?f=4&t=36115

hadoop 1.0.3 在 ubuntu 12.04 上的單機安裝腳本

然後輸入 sudo 密碼，接下來應該就會看到安裝 sun-java6-jdk 、下載 hadoop-1.0.3.tar.gz 跟設定 hadoop 1.0.3 的流程。
這樣跑會用您目前的身份執行 hadoop，裝好後，請用 jps 確認是否有 NN, DN, JT, TT 在背景跑。若有，可用 w3m http://localhost:50070 跟 http://localhost:50030 檢查 HDFS 與 MapReduce 的狀態
底下是 hbase 0.94.1 在 ubuntu 12.04 上的單機安裝腳本
然後輸入 sudo 密碼，接下來應該就會看到下載 hbase-0.94.1.tar.gz 跟設定 hbase 0.94.1 的流程。請用 jps 確認是否有 HMaster, HRegionServer 跟 HQuorumPeer 在背景跑。若有，可用 w3m http://localhost:60010 看 HMaster 的頁面。

- Jazz