欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

HIVE的安装部署

程序员文章站 2022-04-29 17:41:26
...

为什么安装hive,首先要先安装MySQL?

在每一个节点上安装hive,每一个hive是拥有一套自己的元数据,每个节点的库,表就不统一。所以安装一个MySQL让其他的节点都连接这一个MySQL。

MySQL数据库的安装(使用yum源进行安装,在集群中的一个节点上安装)

第一步:在线安装MySQLMySQL相关的软件包

yum install -y mysql mysql-server mysql-devel

第二步:启动MySQL的服务,并设设置MySQL开机自启动

service mysqld start
chkconfig mysqld on

第三步:进入MySQL的客户端然后进行授权

//进入mysql
mysql
//使用mysql数据库
use mysql;
//配置远程连接
grant all privileges on *.* to 'root'@'%' identified by '123456' with grant option;
//刷新
 flush privileges;

第四步:设置root用户连接MySQL的密码

//设置密码
update user set password=password('123456') where user='root';
//刷新
flush privileges;

注:设置完密码后,在进入MySQL的命令是:mysql -uroot -p123456

安装hive

第一步:上传hive的压缩包到 /export/softwares/

HIVE的安装部署
HIVE的安装部署

第二步:将安装包解压到 /export/servers

cd /export/servers/
tar -zxvf /export/softwares/hive-1.1.0-cdh5.14.0.tar.gz 

HIVE的安装部署

第三步:修改 hive 的配置文件

**修改 hive-env.sh **

//添加我们的hadoop的环境变量:
cd  /export/servers/hive-1.1.0-cdh5.14.0/conf
cp hive-env.sh.template hive-env.sh
vim hive-env.sh

HADOOP_HOME=${HADOOP_HOME}
export HIVE_CONF_DIR=/export/servers/hive-1.1.0-cdh5.14.0/conf

HIVE的安装部署
修改 hive-site.xml

cd /export/servers/hive-1.1.0-cdh5.14.0/conf
vim hive-site.xml

<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
        <property>
                <name>javax.jdo.option.ConnectionURL</name>
                <value>jdbc:mysql://node03:3306/hive?createDatabaseIfNotExist=true</value>
        </property>

        <property>
                <name>javax.jdo.option.ConnectionDriverName</name>
                <value>com.mysql.jdbc.Driver</value>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionUserName</name>
                <value>root</value>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionPassword</name>
                <value>123456</value>
        </property>
        <property>
                <name>hive.cli.print.current.db</name>
                <value>true</value>
        </property>
        <property>
                <name>hive.cli.print.header</name>
                <value>true</value>
        </property>
        <property>
                <name>hive.server2.thrift.bind.host</name>
                <value>node03</value>
        </property>
<!--
        <property>
                <name>hive.metastore.uris</name>
                <value>thrift://node03:9083</value>
        </property>
-->
</configuration>

注:这里的node03,是因为MySQL安装在node03的节点上

第四步:上传 MySQL 的 lib 驱动包

//将mysql的lib驱动包上传到hive的lib目录下
cd /export/servers/hive-1.1.0-cdh5.14.0/lib
//将mysql-connector-java-5.1.38.jar 上传到这个目录下

第五步:将安装包发送给其他两个节点

spc -r /export/servers/hive-1.1.0-cdh5.14.0/ node02:$PWD
spc -r /export/servers/hive-1.1.0-cdh5.14.0/ node0:$PWD

第六步:配置hive的环境变量

vi hive.sh 

export HIVE_HOME=/export/servers/hive-1.1.0-cdh5.14.0
export PATH=:$PATH:$HIVE_HOME/bin

第七步:把hive环境变量发送给其他节点

spc /etc/profile.d/hive.sh node02:$PWD
spc /etc/profile.d/hive.sh node0:$PWD

第八步:对每个节点进行 source

source /etc/profile

此时hive就安装好了

在虚拟机输入 hive 出现下图 代表hive安装好了

HIVE的安装部署

使用小海豚连接虚拟机里的MySQL

HIVE的安装部署
HIVE的安装部署