大数据项目实战（安装Hive）-Toy模板网

这篇具有很好参考价值的文章主要介绍了大数据项目实战（安装Hive）。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

一，搭建大数据集群环境

1.3 安装Hive

1.3.1 Hive的安装

1.安装MySQL服务

1）检查是否安装MySQL，如安装将其卸载。卸载命令

rpm -qa | grep mysql

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

2）搜索MySQL文件夹，如存在则删除

find / -name mysql

rm -rf /etc/selinux/targeted/active/modules/100/mysql
rm -rf /usr/lib64/mysql

rm -rf /usr/share/mysql

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

3）安装MySQL的两种方法。

法一：

①下载yum存储库（如遇网络问题下载不了，可通过离线安装MySQL）

百度网盘链接：https://pan.baidu.com/s/1AkJCiEuxdkG_t-PfumbQDQ?pwd=huan
提取码：huan

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

②安装

rpm -Uvh mysql80-community-release-el7-9.noarch.rpm

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

③安装mysql-community-server：

yum -y install mysql-community-server

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

法二：离线安装MySQL8.0（上述方式下载不了情况可选择此方法安装）

①删除software下的mysql开头的文件

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

②创建mysql目录

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

③进入mysql目录上传所有安装包

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

④安装之前按照之前的方式先检查是否安装过MySQL，如有安装，先卸载。

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

⑤然后按以下顺序安装（如提示mariadb-libs问题，可先将mariadb-libs卸载）

rpm -ivh mysql-community-client-plugins-8.0.32-1.el7.x86_64.rpm

rpm -ivh mysql-community-common-8.0.32-1.el7.x86_64.rpm

rpm -ivh mysql-community-libs-8.0.32-1.el7.x86_64.rpm

rpm -ivh mysql-community-client-8.0.32-1.el7.x86_64.rpm

rpm -ivh mysql-community-icu-data-files-8.0.32-1.el7.x86_64.rpm

rpm -ivh mysql-community-server-8.0.32-1.el7.x86_64.rpm

4）修改密码

①启动mysql服务器：

systemctl start mysqld

②获取初始密码：

grep 'temporary password' /var/log/mysqld.log

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

③登录MySQL：

mysql -u root -p

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

④修改密码：

ALTER USER 'root'@'localhost' IDENTIFIED BY '初始密码';

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

注意：密码为8位数以上和种类至少大写+小写+符号+数字

⑤修改密码安全等级为LOW：

set global validate_password.policy=LOW;

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

⑥设置密码长度为6：

set global validate_password.length=6;

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

⑦ 修改密码：

ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

5）设置MySQL允许远程登录

开启远程访问：

use mysql;

update user set host='%' where user='root';

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

6）重启MySQL服务：

systemctl restart mysqld

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

2.安装Hive

(1)上传安装包

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

(2)进行解压

tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /export/servers/

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

(3)修改配置文件

①修改hive安装路径

mv apache-hive-1.2.1-bin hive

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

②复制hive-env.sh文件

cp hive-env.sh.template hive-env.sh

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

③修改hive-env.sh文件（添加Hadoop环境变量）

vi hive-env.sh

大数据项目实战（安装Hive）,hive,hadoop,数据仓库

④创建hive-site.xml文件并进行以下配置：

vi hive-site.xml

添加以下内容：

<configuration>
<!--连接数据库地址，名称 -->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://localhost:3306/hive?
createDatabaseIfNotExist=true&amp;useUnicode=true&amp;characterEncoding=UTF8&amp;useSSL=false</value>
</property>
<!--连接数据库驱动 -->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!--连接数据库用户名称 -->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<!--连接数据库用户密码 -->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
</configuration>

大数据项目实战（安装Hive）,hive,hadoop,数据仓库