hive的安装(包括mysql)
1.Hive 简介 1.1 在 hadoop 生态圈中属于数据仓库的角色。他能够管理 hadoop 中的数据,同时可以查询 hadoop 中的数据。 本质上讲, hive 是一个 SQL 解析引擎。 Hive 可以把 SQL 查询转换为 MapReduce 中的 job 来运行。 hive 有一套映射工具,可以把 SQL
1.Hive简介
1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据,同时可以查询hadoop中的数据。
本质上讲,hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapReduce中的job来运行。
hive有一套映射工具,可以把SQL转换为MapReduce中的job,可以把SQL中的表、字段转换为HDFS中的文件(夹)以及文件中的列。
这套映射工具称之为metastore,一般存放在derby、mysql中。
1.2 hive在hdfs中的默认位置是/user/hive/warehouse,是由配置文件hive-conf.xml中属性hive.metastore.warehouse.dir决定的。
2.hive的安装
(1)解压缩、重命名、设置环境变量
(2)在目录$HIVE_HOME/conf/下,执行命令mv hive-default.xml.template hive-site.xml重命名
在目录$HIVE_HOME/conf/下,执行命令mv hive-env.sh.template hive-env.sh重命名
(3)修改hadoop的配置文件hadoop-env.sh,修改内容如下:
export HADOOP_CLASSPATH=.:$CLASSPATH:$HADOOP_CLASSPATH:$HADOOP_HOME/bin
(4)在目录$HIVE_HOME/bin下面,修改文件hive-config.sh,增加以下内容:
export JAVA_HOME=/usr/local/jdk
export HIVE_HOME=/usr/local/hive
export HADOOP_HOME=/usr/local/hadoop
3.安装mysql(server端和client端)
(1)删除linux上已经安装的mysql相关库信息。rpm -e xxxxxxx --nodeps执行命令rpm -qa |grep mysql 检查是否删除干净
(2)执行命令 rpm -i mysql-server-******** 安装mysql服务端
(3)启动mysql 服务端,执行命令 mysqld_safe &
(4)执行命令 rpm -i mysql-client-******** 安装mysql客户端
(5)执行命令mysql_secure_installation设置root用户密码
(6)默认情况下,mysql是不允许hive连接的,要在mysql的客户端授权,命令是:grant all on hive.* to ‘root’@’%’ identified by ‘你的密码’; ,再刷新下,命令:flush privileges;
4. 使用mysql作为hive的metastore
(1)把mysql的jdbc驱动放置到hive的lib目录下(因为hive要连接mysql)
(2)修改hive-site.xml文件,修改内容如下:
//在mysql中对应的数据库的名称
推荐阅读
-
Windows下安装MySQL 5.7.17压缩版中遇到的坑
-
Mysql 5.7.17安装后登录mysql的教程
-
Anaconda下安装mysql-python的包实例
-
MySQL图形工具 MySQL GUI Tools的安装使用方法
-
Win10下免安装版MySQL8.0.16的安装和配置教程图解
-
CentOS 7.4 64位安装配置MySQL8.0的详细步骤
-
解决Windows环境下安装 mysql-8.0.11-winx64 遇到的问题
-
win10免安装版本的MySQL安装配置教程
-
mysql-8.0.16 winx64的最新安装教程图文详解
-
windows版本下mysql的安装启动和基础配置图文教程详解