• HBase与JDK兼容表

• HBase与Hadoop兼容表
  

安装Java

JDK8基本兼容最新版本的HBase以及配套的Hadoop，这里安装jdk 1.8

• yum search java|grep jdk

• 选择版本安装 yum install -y java-1.8.0-openjdk*
• 验证安装：java -version
• 查找java安装地址： find / -name ‘java’

• 这里以/www/server/java/jdk1.8.0_371/为我们要使用的java版本
• vi ~/.bash_profile 添加java环境变量
  export JAVA_HOME=/www/server/java/jdk1.8.0_371
  PATH=PATH:JAVA_HOME/bin:$HOME/bin
• source ~/.bash_profile 生效java环境变量

安装Hadoop

下载

• 下载Hadoop最新版本，注意跟CPU架构匹配
• 下载地址：https://hadoop.apache.org/releases.html
• 
• 下载到/data目录
• 执行tar命令解压：tar -xzvf hadoop-3.3.6.tar.gz

配置

• 新建hadoop用户以及设置密码用于执行hadoop启动

useradd hadoop
passwd hadoop

• 配置hadoop用户免密登录

ssh-keygen -t rsa
ssh-copy-id -i /home/hadoop/.ssh/id_rsa.pub hadoop@localhost

• 编辑hadoop-env.sh:
  vi /data/hadoop-3.3.6/etc/hadoop/hadoop-env.sh

    # set to the root of your Java installation
    export JAVA_HOME=/www/server/java/jdk1.8.0_371
    export HDFS_NAMENODE_USER=hadoop
    export HDFS_DATANODE_USER=hadoop
    export HDFS_SECONDARYNAMENODE_USER=hadoop

• 编辑core-site.xml:
  vi /data/hadoop-3.3.6/etc/hadoop/core-site.xml

    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://127.0.0.1:8020</value>
    </property>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/data/hadoop-3.3.6/tmp</value>
    </property>
</configuration> 

• 编辑 hdfs-site.xml:
  vi /data/hadoop-3.3.6/etc/hadoop/mapred-site.xml

    <configuration>
         <property>
          <name>dfs.datanode.data.dir</name>
          <value>/data/hadoop-3.3.6/data</value>
         </property>
    </configuration>

• 编辑 mapred-site.xml:
  vi /data/hadoop-3.3.6/etc/hadoop/mapred-site.xml

    <configuration>
        <property>
            <name>mapreduce.framework.name</name>
            <value>yarn</value>
        </property>
    </configuration>

• 编辑yarn-site.xml:
  vi /data/hadoop-3.3.6/etc/hadoop/yarn-site.xml

    <configuration>
        <property>
            <name>yarn.nodemanager.aux-services</name>
            <value>mapreduce_shuffle</value>
        </property>
    </configuration>

启动

• 切换为hadoop用户执行：
  su hadoop
• 格式化系统:
  /data/hadoop-3.3.6/bin/hdfs namenode -format
• 启动NameNode 与DataNode
  /data/hadoop-3.3.6/sbin/start-dfs.sh
  启动成功日志如图所示：
  

安装HBase

• 下载hbase到/data目录： https://dlcdn.apache.org/hbase/2.5.6/
• 
• 执行tar命令解压：
  tar -xzvf hbase-2.5.6-bin.tar.gz
• 修改hbase-site.xml:
  vi /data/hbase-2.5.6/conf/hbase-site.xml

  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://127.0.0.1:8020/hbasermysj</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>

• 启动HBase进程

su hadoop
/data/hbase-2.5.6/bin/hbase-daemon.sh start zookeeper
/data/hbase-2.5.6/bin/hbase-daemon.sh start master
/data/hbase-2.5.6/bin/hbase-daemon.sh start regionserver

• 执行hbase shell测试

/data/hbase-2.5.6/bin/hbase shell

hbase:002:0> create 'test','cf'
Created table test
Took 0.6884 seconds                                         
=> Hbase::Table - test
hbase:006:0> put 'test','rowkey1','cf:a', 'value1'
Took 0.0091 seconds  

• 执行dfs查看hbase文件

/data/hadoop-3.3.6/bin/hdfs dfs -ls /hbasermysj