您当前的位置: 首页 >  hive

杨林伟

暂无认证

  • 3浏览

    0关注

    3337博文

    0收益

  • 0浏览

    0点赞

    0打赏

    0留言

私信
关注
热门博文

Mac下安装hive

杨林伟 发布时间:2022-02-21 15:14:24 ,浏览量:3

文章目录
  • 01 引言
  • 02 Hive安装
  • 03 配置hive元数据库
  • 04 验证与运行hive
    • 4.1 运行前准备
    • 4.2 验证与运行

01 引言

hive本身是没有存储功能的,数据是存储在hadoophdfs里面。所以要安装并使用hive,需要现在装Hadoop,具体的安装方式可以参考之前写的博客《Mac下安装Hadoop》。

接下来,本文讲解如何在Mac的环境下安装hive。

02 Hive安装

① 终端使用brew安装:

brew install hive

在这里插入图片描述 ② 配置hive环境变量,打开环境变量配置文件:

open ~/.bash_profile

③ 配置文件最后添加(根据安装的版本号来配置版本号):

export HIVE_HOME=/usr/local/Cellar/hive/3.1.2_3
export PATH=$HIVE_HOME/bin:$PATH

④ 保存并更新配置文件:

source ~/.bash_profile
03 配置hive元数据库

注意:hive 配置元数据库metastore有3种方式,分别为内嵌配置、本地配置和远程配置,这里讲的是本地模式,具体的配置可以参考:《Hive Metastore 的三种配置方式》

Hive的元数据存储在MySQL数据库,所以需要安装多一个MySQL数据库,安装方式可以参考之前写的博客《Mac Docker 安装MySQL》。

安装好MySQL之后,在MySQL数据库里新建数据库metastore

mysql> create database metastore;

在这里插入图片描述 接下来需要配置Hive关联MySQL的元数据库了。

① 进入hive配置目录:

cd /usr/local/Cellar/hive/3.1.2_3/libexec/conf

② 新建hive-site.xml文件:

vi hive-site.xml

hive-site.xml文件里面粘贴如下内容(主要配置Hive关联MySQL的元数据库):


  
  
        hive.metastore.local
        true
    
    
        javax.jdo.option.ConnectionURL
        jdbc:mysql://localhost/metastore
    
 
    
        javax.jdo.option.ConnectionDriverName
        com.mysql.jdbc.Driver
    
  
    
        javax.jdo.option.ConnectionUserName
        root
    
  
  
        javax.jdo.option.ConnectionPassword
        123456
    
 
 
 
    
        hive.exec.local.scratchdir
        /tmp/hive
    
 
 
    
        hive.downloaded.resources.dir
            /tmp/hive
    
 
    
 
        hive.metastore.warehouse.dir
        /user/hive/warehouse
    
 
    
        hive.server2.logging.operation.log.location
        /tmp/hive
    
 

④ 进入hivelib目录,并下载MySQL驱动包:

cd /usr/local/Cellar/hive/3.1.2_3/libexec/lib

curl -O https://repo1.maven.org/maven2/mysql/mysql-connector-java/8.0.28/mysql-connector-java-8.0.28.jar

在这里插入图片描述

04 验证与运行hive 4.1 运行前准备

首先确保MySQL已经启动: 在这里插入图片描述 确保Hadoop已经启动,启动命令如下:

cd /usr/local/Cellar/hadoop/3.3.1/libexec/sbin
./start-all.sh

浏览器输入如下地址,如果能正常访问,表示hadoop安装成功了:

  • http://localhost:9870/
  • http://localhost:8088/
4.2 验证与运行

命令框里输入:

hive

如果出现下图,表示hive安装并配置成功: 在这里插入图片描述 再输入:

show databases;

如果提示一下异常,表示hive的数据库MySQL安装的时候没有初始化:

FAILED: HiveException java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient

先退出hive(使用命令exit;)然后输入命令:

schematool -dbType mysql -initSchema

在这里插入图片描述 再次输入hive,并输入命令:

hive
show databases;

如果提示如下,表示Hive安装成功并关联了MySQL的数据库了:

关注
打赏
1662376985
查看更多评论
立即登录/注册

微信扫码登录

0.1720s