在centos系统上部署hbase并使其与hadoop协同工作，需要完成hadoop和hbase的安装、环境变量配置以及配置文件调整，确保两者间的无缝通信。以下步骤详细阐述了这一过程：
一、Hadoop安装
准备阶段：
- 下载对应版本的Hadoop安装包。
- 修改
/etc/hosts文件，正确配置主机名和IP地址映射。 - 安装并配置JDK，设置必要的环境变量（JAVA_HOME等）。
安装步骤：
- 将Hadoop安装包解压到指定目录。
- 修改Hadoop核心配置文件（
core-site.xml、hdfs-site.xml、mapred-site.xml等），设置HDFS和MapReduce的参数，例如NameNode地址、DataNode数量等。 - 设置Hadoop环境变量（HADOOP_HOME等），并使之生效。
二、HBase安装
准备阶段：
- 下载对应版本的HBase安装包。
- 安装ZooKeeper，HBase依赖ZooKeeper进行集群协调。
安装步骤：
- 将HBase安装包解压到指定目录。
- 设置HBase环境变量（
HBASE_HOME等）。 - 修改HBase配置文件（
hbase-env.sh、hbase-site.xml、regionservers等），配置HBase参数，例如ZooKeeper地址、HBase根目录等。
三、HBase与Hadoop集成配置
HBase配置：
- 在
hbase-site.xml中，将hbase.rootdir指向HDFS路径，例如：hdfs://namenode:9000/hbase(将namenode替换为Hadoop NameNode的主机名)。 - 将
hbase.cluster.distributed设置为true，启用分布式模式。 - 配置
hbase.zookeeper.quorum，指定ZooKeeper服务器地址列表。
Hadoop配置：
- 在
core-site.xml中，将fs.default.name设置为hdfs://namenode:9000(将namenode替换为Hadoop NameNode的主机名)。
四、启动Hadoop和HBase集群
- 在Hadoop主节点执行
./start-all.sh启动整个Hadoop集群。 - 在HBase主节点执行
./start-hbase.sh启动HBase集群。
五、验证安装
- 使用
jps命令查看Hadoop和HBase进程是否正常运行。 - 访问HBase Web UI (通常为
http://master:16010，将master替换为HBase主节点主机名) 检查集群状态。
重要提示： 以上步骤基于较旧的Hadoop和HBase版本，不同版本可能存在差异。请务必参考您所使用版本的官方文档获取准确的安装和配置信息。 建议使用最新的稳定版本，并仔细阅读官方文档中的最佳实践和安全建议。
