BigData-Notes/notes/installation/Linux环境下Hive的安装部署.md
2019-04-07 12:28:26 +08:00

3.3 KiB
Raw Blame History

Linux环境下Hive的安装

Hive 版本 hive-1.1.0-cdh5.15.2.tar.gz

系统环境Centos 7.6

1.1 下载并解压

下载所需版本的Hive这里我下载的是cdh5.15.2版本的Hive。下载地址为http://archive.cloudera.com/cdh5/cdh/5/

# 下载后进行解压
 tar -zxvf hive-1.1.0-cdh5.15.2.tar.gz

1.2 配置环境变量

# vim /etc/profile

添加环境变量:

export HIVE_HOME=/usr/app/hive-1.1.0-cdh5.15.2
export PATH=$HIVE_HOME/bin:$PATH

使得配置的环境变量立即生效:

# source /etc/profile

1.3 修改配置

1. hive-env.sh

进入安装目录下的conf/目录拷贝Hive的环境配置模板flume-env.sh.template

cp hive-env.sh.template hive-env.sh

修改hive-env.sh,指定Hadoop的安装路径

HADOOP_HOME=/usr/app/hadoop-2.6.0-cdh5.15.2

2. hive-site.xml

新建hive-site.xml 文件内容如下主要是配置存放元数据的MySQL数据库的地址、驱动、用户名和密码等信息

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://hadoop001:3306/hadoop_hive?createDatabaseIfNotExist=true</value>
  </property>
  
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>
  
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>
  
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
  </property>

</configuration>

1.4 拷贝数据库驱动

将MySQL驱动拷贝到Hive安装目录的lib目录下, MySQL驱动的下载地址为https://dev.mysql.com/downloads/connector/j/ , 在本仓库的resources目录下我也上传了一份,有需要的可以自行下载。

1.5 初始化元数据库

  • 当使用的 hive 是1.x版本时可以不进行初始化操作Hive会在第一次启动的时候会自动进行初始化但不会生成所有的元数据信息表只会初始化必要的一部分在之后的使用中用到其余表时会自动创建

  • 当使用的 hive 是2.x版本时必须手动初始化元数据库。初始化命令

    # schematool 命令在安装目录的bin目录下由于上面已经配置过环境变量在任意位置执行即可
    schematool -dbType mysql -initSchema
    

本用例使用的CDH版本是hive-1.1.0-cdh5.15.2.tar.gz,对应Hive 1.1.0 版本,可以跳过这一步。

1.6 启动

由于已经将Hive的bin目录配置到环境变量直接使用以下命令启动成功进入交互式命令行后执行show databases命令,无异常则代表搭建成功。

# Hive

在Mysql中也能看到Hive创建的库和存放元数据信息的表