博客

Hive工具介绍（二）

  • Post author:
  • Post category:其他



Hive的安装及配置

一、Mysql安装
安装MySQL可以基于yum进行安装
  1. 安装mysql数据库
yum install -y mysql-server
  1. 对数据库的字符集进行配置
vi /etc/my.cnf
在配置文件的最后加上配置信息指定默认的指符集为utf-8
default-character-set=utf8
  1. 启动mysql
service mysqld start
  1. 查看mysql的状态
service mysqld status
  1. 设置mysql开机自动启动
chkonfig mysqld on
  1. 设置mysql的root密码
mysql -u root -p  #进入mysql
set password for root@localhost=password(‘123456’);  #设置root账号密码为123456
如果远端使用工具无法连接到mysql可以创建新的用户并且赋予相应的权限
  1. ​创建一个远程连接用户
create user ‘xiesheng’@’%’ identified by ‘123456’;
  1. 对创建的用户进行授权
grant all on *.* to ‘xiesheng’@’%’;

二、Hive配置
  1. 下载Hive    apache-hive-3.1.2-bin.tar.gz
  2. 上传服务器
  3. 解压Hive tar -zxvf apache-hive-3.1.2-bin.tar.gz
  4. 在解压后hive的conf目录下创建hive-site.xml文件
<?xml version=”1.0″?>
<?xml-stylesheet type=”text/xsl” href=”configuration.xsl”?>
<configuration>
/*Hive的数据存储路径*/
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/usr/hive/warehouse</value>
</property>
<property>
<name>hive.metastore.local</name>
<value>true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql
://localhost/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
</configuration>
  1. 把hive的bin目录下的jline-2.12.jar拷贝到hadoop下
scp /root/software/apache-hive-3.1.2-bin/lib/jline-2.12.jar /root/software/hadoop-3.1.3/share/hadoop/yarn/lib
  1. 把Hive配置到环境变量
  2. 启动hive
hive shell

解决方案：引起的原因是hadoop中guava.jar与hive中的这个jar包版本不一致，将hive下lib中的相关的这个包复制到 hadoop\common\lib下，并且把hadoop中的原来这个包删除掉

报错：HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

解决方案：引起的原因是没有初始化数据库导致的，执行下面这个命令：schematool -dbType mysql -initSchema


报错：org.apache.hadoop.hive.metastore.HiveMetaException: Failed to load driver


解决方案：下载mysql-connector-java-5.1.49.jar jar包，放到hive的lib目录下即可


版权声明：本文为advent86原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。