CentOS7安装Hive3.1.2+MySQL5.7

文章目录

1.安装Hive

1.1 解压hive安装包1.2 配置环境变量1.3 解决日志Jar包冲突1.4 初始化元数据库 2 启动hive

2.1 启动 HDFS,Yarn,historyserver2.2 启动hive2.3 查看hive启动日志 3. 安装MySQL

3.1 安装前准备

3.1.1 退出hive客户端3.1.2 拷贝JDBC驱动3.1.3 配置hive/conf中的信息 3.2 安装MySQL

3.2.1 卸载自带的mysql3.2.2 解压mysql3.2.3 登录mysql 4. Hive 元数据配置到 MySQL

4.1 拷贝jdbc驱动4.2 编辑hive-site.xml文件4.3 使用新密码登录mysql4.4 新建 Hive 元数据库4.5 初始化hive元数据库4.6 再次启动hive 成功！！！！！！！！！

1.安装Hive 1.1 解压hive安装包

解压hive安装包到指定目录
 tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/
修改名字为hive
mv apache-hive-3.1.2-bin/ hive

1.2 配置环境变量

sudo vim /etc/profile.d/my_env.sh

添加：
#HIVE_HOME
export HIVE_HOME=/opt/module/hive
export PATH=$PATH:$HIVE_HOME/bin

使环境生效
source /etc/profile

1.3 解决日志Jar包冲突

mv $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.jar $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.bak

1.4 初始化元数据库

bin/schematool -dbType derby -initSchema

2 启动hive 2.1 启动 HDFS,Yarn,historyserver

start-all.sh
mr-jobhistory-daemon.sh start historyserver   (hadoop102启动)

2.2 启动hive

等待hadoop启动过程中安全模式退出再启动hive
----------------------------
bin/hive.sh  进入hive客户端

2.3 查看hive启动日志

cd /tmp/atguigu
-----------------------
 atguigu是我启动hive的用户，谁启动hive，就去谁哪里看log日志，拖动空格，可以帮助更好的定位查看日志

3. 安装MySQL 3.1 安装前准备 3.1.1 退出hive客户端

Ctrl+ C

3.1.2 拷贝JDBC驱动

拷贝JDBC驱动到 hive/lib
------------------------------------
cp mysql-connector-java-5.1.37-bin.jar /opt/module/hive/lib/

3.1.3 配置hive/conf中的信息

cd /opt/module/hive/conf  //进入conf目录

3.2 安装MySQL 3.2.1 卸载自带的mysql

rpm -qa|grep mariadb    //查找数据库

sudo rpm -e --nodeps mariadb-libs  //删除自带mysql

3.2.2 解压mysql

tar -xf   tar -xf mysql-5.7.28-1.el7.x86_64.rpm-bundle.tar

3.2.3 登录mysql

1.删除/etc/my.cnf文件中 datadir 指向的目录下的内容：
一般首次安装里面不会有内容
------------------------------
rm -rf   删除内容所在位置

2.初始化mysql数据库，记住初始root密码
----------------------------------
 sudo mysqld --initialize --user=mysql

3.启动mysql服务
------------------------
 sudo systemctl start mysqld

4.登录mysql
----------------------------------
mysql -uroot -p

5.修改root密码
-------------------------
set password = password("新密码")；

6.修改 mysql 库下的 user 表中的 root 用户允许任意 ip 连接
-------------------------------
update mysql.user set host='%' where user='root';
flush privileges;

4. Hive 元数据配置到 MySQL 4.1 拷贝jdbc驱动

拷贝jdbc驱动到hive 的lib
----------------------------
sudo mv /opt/software/mysql-connector-java-5.1.37-bin.jar /opt/module/hive/lib/

4.2 编辑hive-site.xml文件

vim hive-site.xml   //编辑这个hive-site.xml文件，是动态加载的

添加：记住这些配置信息，我们安装mysql时需要一致，并且值不要有空格，不然hive重新初始化会出现错误。
----------------------------------------------------------




 
 
 javax.jdo.option.ConnectionURL
 jdbc:mysql://hadoop102:3306/metastore?useSSL=false

 
 
 javax.jdo.option.ConnectionDriverName
 com.mysql.jdbc.Driver


 
 javax.jdo.option.ConnectionUserName
 root
 
 
 
 javax.jdo.option.ConnectionPassword
 666666

 
 
 hive.metastore.schema.verification
 false

 
 
 hive.metastore.event.db.notification.api.auth
 false

 
 
hive.metastore.warehouse.dir
 /user/hive/warehouse
 

-------------------------
:wq    //保存退出

4.3 使用新密码登录mysql

mysql  -uroot -p新密码

4.4 新建 Hive 元数据库

create database metastore;
quit;  //退出

4.5 初始化hive元数据库

schematool -initSchema -dbType mysql -
verbose

4.6 再次启动hive

bin/hive

试用一下

---

成功！！！！！！！！！