基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

用到的安装包有:

apache-hive-1.2.1-bin.tar.gz

mysql-connector-java-5.1.49.tar.gz

百度网盘链接:

链接:https://pan.baidu.com/s/1VU9rBPm9c_LE3llqvp8qZw

提取码:zjhz

前提条件 :搭建好Hadoop集群

建议:初学者初步安装看多看一下文中的建议。

一.MySQL安装

  前提:必须卸载干净MySQL

  1. 首先用命令更新系统

    Centos 的安装命令

sudo yum update

    Ubantu的安装命令

apt-get update

  2.下载相应 rpm 包

wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm

  3.升级安装

rpm -ivh mysql-community-release-el7-5.noarch.rpm

  4.用插件安装mysql-server和mysql-client

    Centos中的yum插件

yum install mysql-server mysql-client

  5.Ubantu的安装命令

apt-get install mysql-server mysql-client

  6.启动MySQL服务

service mysql restart

  7.MySQL查看服务是否启动

ps –ef|grep mysql

  8.登录MySQL(默认密码是为空的,输入密码时回车就好)

mysql –u root –p

  9.修改MySQL的密码(建议:密码和我的一样,后面还有hive-site.xml配置)

mysql> use mysql;
mysql> UPDATE user SET password=password("1234") WHERE user='root';
mysql> exit;

注意:如果Mysql的版本是5.7及以上的话update语句如下:

mysql> update user set authentication_string=passworD("1234") where user='root';

  10.退出重启服务并登录

service mysql restart 

mysql> use mysql

select User, Host from user;

分别执行一下命令

mysql> update user set User=”roots” where Host=”127.0.0.1”;

mysql> update user set Host="%" where User="roots";
mysql> update user set User="root" where Host="%";

二、HIve安装配置

安装过程:

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

1.上传(Xshell)到root目录下rz命令上传

以下命令时在文件所在目录下执行按顺序执行

我的文件安排时将hive安装在/usr/local下

tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive
cd mysql-connector-java-5.1.49
mv mysql-connector-java-5.1.49.tar.gz /usr/local/hive/lib/(该步骤就是上次mysqljar包)

建议:该操作是将hive文件解压然后放在指定的目录下(我是放在/usr/local下),建议小白和我安装位置相同,以为后面要配置hive-site.xml中的参数。

2. 配置项

cd /usr/local/hive/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml

查找(注意一定要在编辑模式查找(按esc键),不要在插入模式查找)

/javax.jdo.option.ConnectionURL

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

更改value值

jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true

注意:这一步时mysql版本是5.7或5.7以上的版本的需要操作,其他版本不要操作

/javax.jdo.option.ConnectionDriverName

改jc

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

这步是要配置的

/javax.jdo.option.ConnectionUserName

Value 改为root

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

操作这步的意思是用root用户去登录hive

/javax.jdo.option.ConnectionPassword

改value的值为为1234(这是我前面设置的密码,你们也要对应你们的密码)

对应前面

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

分别查找

/${system:java.io.tmpdir}改为对应hive的目录(我的目录是/usr/local/hive)

文件中所用${system:java.io.tmpdir}改为/usr/local/hive

/${system:user.name}

文件中所用${system:user.name}改为${user.name}

到这里hive-site.xml就配置完成了

接下来配置hive-env.sh

cp hive-env.sh.template hive-en.sh

修改下面HADOOP_HOME并把注释去掉(就是去掉前面#)

改如下图(目录是对应得Hadoop安装路径)

基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》

到此就配置完成hive-env.sh文件了,hive的配置文件也就是配置完成了

3.复制Hadoop配置文件到hive目录下的conf目录下

cd etc/hadoop(这是我Hadoop安装路径)
cp core-site.xml /usr/local/hive/conf/
cp hdfs-site.xml /usr/local/hive/conf/

4.启动hive

service mysql restart 启动mysql服务
start-all.sh 启动集群
cd /usr/local/hive/bin 进入hive/bin目录下
./hive 启动hive
上一篇:Echart - 最好最强大效果最丰富的可视化图表插件


下一篇:深入浅出 消息队列 ActiveMQ (转)