微信搜索lxw1234bigdata | 邀请体验:数阅–数据管理、OLAP分析与可视化平台 | 赞助作者:赞助作者

[一起学Hive]之四-Hive的安装配置

Hive lxw1234@qq.com 20560℃ 0评论

其实Hive的安装配置应该放在第二章来介绍,晚了些,希望对Hive初学者有用。

三、Hive的安装配置

3.1 环境需求

  • Hadoop Client
  • Mysql

3.2 下载并解压Hive0.13.1安装包

下载地址:http://archive.apache.org/dist/hive/hive-0.13.1/apache-hive-0.13.1-bin.tar.gz

cp apache-hive-0.13.1-bin.tar.gz /usr/local

cd /usr/local

tar –xzvf apache-hive-0.13.1-bin.tar.gz

 配置环境变量(如果不是root用户,配置自己的~/.bash_profile即可):

 vi /etc/profile

 export HIVE_HOME=/usr/local/apache-hive-0.13.1-bin

 export PATH=$HIVE_HOME/bin: $PATH

 source /etc/profile

 

3.3 在Mysql中建立Hive元数据库和表

root进入Mysql;

CREATE DATABASE hive;

//下面给所有的ip都赋了访问权限,安全起见,

//一般这里只需要对安装Hive Client端的机器IP赋权即可

GRANT ALL ON hive.* TO hive@’%’ IDENTIFIED BY ‘hive1234′;

flush privileges;

3.4 配置hive-site.xml

cd $HIVE_HOME/conf/

新建hive-site.xml, 里面是以下内容:

<?xml version=”1.0″?>
<?xml-stylesheet type=”text/xsl” href=”configuration.xsl”?>
<configuration>
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/hivedata/warehouse/</value>
<description>Hive在HDFS上的根目录</description>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://127.1.1.102:3306/hive?createDatabaseIfNotExist=true</value>
<description>Hive元数据库的连接串,红色为数据库名</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>Hive元数据库JDBC驱动</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>hive</value>
<description>Hive元数据库用户名</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>hive1234</value>
<description>Hive元数据库密码</description>
</property>
<property>
<name>datanucleus.autoCreateTables</name>
<value>true</value>
<description>不存在时,自动创建Hive元数据表</description>
</property>
<property>
<name>datanucleus.autoCreateColumns</name>
<value>true</value>
<description>不存在时,自动创建Hive元数据列</description>
</property>
<property>
<name>datanucleus.fixedDatastore</name>
<value>false</value>
</property>
<property>
<name>datanucleus.autoStartMechanism</name>
<value>SchemaTable</value>
</property>
</configuration>

      这些是必须的参数,配好就行了,特别注意红色的几个参数,其他可根据实际需求来配置。

 

3.5 进入Hive-Cli

由于3.3中已经配置了环境变量,因此直接执行hive命令,即可进入Hive-Cli.

如:

[lxw1234@dev ~]$ hive

Logging initialized using configuration in file:/usr/local/apache-hive-0.13.1-bin/conf/hive-log4j.properties

hive>show databases;

OK

default

Time taken: 0.42 seconds, Fetched: 1 row(s)

hive>

 

第一次执行,Hive需要在元数据库中建立相关的表,因此会稍微感觉慢一些。

 

3.6 Hive的日志

Hive的日志一般存放在操作系统本地的/tmp/${user.name}/hive.log中,该文件路径由

$HIVE_HOME/conf/hive-log4j.properties中指定,可自己修改该路径。

Hive相关文章(持续更新)

一起学Hive系列

—-Hive概述,Hive是什么

—-Hive函数大全-完整版

—-Hive中的数据库(Database)和表(Table)

Hive分析函数系列

Hive索引

hive优化之——控制hive任务中的map数和reduce数

如果觉得本博客对您有帮助,请 赞助作者

转载请注明:lxw的大数据田地 » [一起学Hive]之四-Hive的安装配置

喜欢 (24)
分享 (0)
发表我的评论
取消评论
表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址