在centos系統上構建高可用hbase集群，需要以下步驟：
準備階段
- 硬件資源: 至少三臺服務器，建議配置為16核CPU、32GB內存、1TB SSD硬盤和千兆網絡，確保網絡互通。
- 操作系統: 所有服務器安裝centos 7.x系統。
- JDK環境: 安裝Java 8或更高版本JDK。
hbase集群部署
1. 安裝依賴包
在所有節點執行以下命令，安裝必要的依賴：
sudo yum install -y Java-1.8.0-openjdk-devel wget
2. 下載并解壓HBase
在所有節點下載并解壓HBase安裝包 (替換2.4.9為實際版本號):
wget https://downloads.apache.org/hbase/2.4.9/hbase-2.4.9-bin.tar.gz tar -zxvf hbase-2.4.9-bin.tar.gz -C /usr/local/hbase/
3. 設置HBase環境變量
在HBase安裝目錄下配置環境變量，使系統能夠識別HBase：
echo "export HBASE_HOME=/usr/local/hbase" >> /etc/profile echo "export PATH=$HBASE_HOME/bin:$PATH" >> /etc/profile source /etc/profile
4. 配置HBase核心配置文件
cd /usr/local/hbase/conf vi hbase-env.sh # 添加或修改以下內容 export JAVA_HOME=/usr/local/java/jdk1.8.0_202 # 替換為你的JDK路徑 export HBASE_MANAGES_ZK=false
- hbase-site.xml: 配置HBase核心參數，包括hdfs根目錄、集群模式、Master端口、ZooKeeper集群地址等。 (請替換namenode, zookeeper1, zookeeper2, zookeeper3 為你的實際主機名或IP地址)
<configuration> <property> <name>hbase.rootdir</name> <value>hdfs://namenode:9000/hbase</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.master.port</name> <value>16000</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>zookeeper1,zookeeper2,zookeeper3</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/usr/local/zookeeper</value> # ZooKeeper數據目錄 </property> </configuration>
5. 配置RegionServers
在$HBASE_HOME/conf/regionservers文件中，列出所有RegionServer節點的主機名或IP地址，每行一個。
6. 啟動集群
- 啟動hadoop: 在所有節點啟動HDFS和yarn (start-dfs.sh, start-yarn.sh)。
- 啟動ZooKeeper: 在ZooKeeper服務器上啟動ZooKeeper服務 (/usr/local/zookeeper/bin/zkServer.sh start)。
- 啟動HBase: 在HBase Master節點啟動HBase (start-hbase.sh)。
7. 驗證集群狀態
使用HBase shell連接集群并執行status命令驗證集群狀態：
hbase shell hbase(main):0> status
重要提示: 以上步驟是簡化版，實際部署中需要考慮防火墻設置、主機名解析、ssh免密登錄、時間同步等因素。 確保Hadoop集群已正確配置并運行。 ZooKeeper集群也需要提前搭建好。 請根據你的實際環境調整配置參數。
