【分布式数据仓库Hive】Hive的安装配置及测试

news/2024/7/8 12:04:27 标签: 数据仓库, 分布式, hive, 大数据

目录

一、数据库MySQL安装

1. 检查操作系统是否有MySQL安装残留

2. 删除残留的MySQL安装（使用yum）

3. 安装MySQL依赖包、客户端和服务器

4. MySQL登录账户root设置密码

5. 启动MySQL服务

6. 登录MySQL，进入数据库操作提示符

7. 授权Hive远程登录账户

hive_1%EF%BC%88%E5%8F%AF%E8%87%AA%E5%91%BD%E5%90%8D%EF%BC%8C%E7%AC%A6%E5%90%88%E5%91%BD%E5%90%8D%E8%A7%84%E5%88%99%E5%8D%B3%E5%8F%AF%EF%BC%89-toc" style="margin-left:40px;">8. 创建Hive元数据数据库hive_1

二、Hive安装配置（使用hadoop用户）

hive-3.1.2-bin.tar.gz%E5%88%B0hadoop01%EF%BC%88%E6%88%96%E8%80%85%E5%85%B6%E4%BB%96%E8%99%9A%E6%8B%9F%E6%9C%BA%EF%BC%89-toc" style="margin-left:40px;">1. 上传压缩包apache-hive-3.1.2-bin.tar.gz到hadoop01（或者其他虚拟机）

2. 在安装目标文件夹内解压缩安装包

hive%E9%85%8D%E7%BD%AE%E6%96%87%E4%BB%B6hive-site.xml-toc" style="margin-left:40px;">3. 编辑hive配置文件hive-site.xml

4. 解压并导入MySQL依赖包

5. 手动初始化元数据库（Hive2以上版本需要）

hive%E5%90%AF%E5%8A%A8%E7%9A%84%E7%8E%AF%E5%A2%83%E5%8F%98%E9%87%8F-toc" style="margin-left:40px;">6. 配置hive启动的环境变量

引言

        本文有博主手敲代码，可以直接复制！（怕水印挡住截图大家看不清）文章也有贴上传到虚拟机所需的资源，是免费下载的！！如果对正在阅读博客的你有帮助，可以动动小手帮我点个赞或者收藏！主页还有其他文章欢迎访问，你的关注将会是我更新的动力~谢谢！

一、数据库MySQL安装

（使用root账户）

1. 检查操作系统是否有MySQL安装残留

rpm -qa | grep -i mysql

 rpm -qa | grep -i mariadb

2. 删除残留的MySQL安装（使用yum）

yum -y remove mariadb*

3. 安装MySQL依赖包、客户端和服务器

在我上传的资源可以免费下载

https://download.csdn.net/download/m0_67830223/89512921?spm=1001.2014.3001.5503

rpm -ivh MySQL-server-community-5.1.73-1.rhel5.x86_64.rpm

 

rpm -ivh MySQL-client-community-5.1.73-1.rhel5.x86_64.rpm

 

rpm -ivh MySQL-devel-community-5.1.73-1.rhel5.x86_64.rpm

4. MySQL登录账户root设置密码

密码值自定义，这里设为‘abc1234’
 

cd /usr/bin

mysqladmin -u root password 'abc1234'

5. 启动MySQL服务

systemctl start mysql.service  //启动mysql

systemctl status mysql.service //查看状态

6. 登录MySQL，进入数据库操作提示符

​​​​​​​mysql -u root -p

7. 授权Hive远程登录账户

grant all on *.* to 'ryx'@'%' identified by 'ryx123'; //“账户”和“密码”自定义

flush privileges; 

hive_1%EF%BC%88%E5%8F%AF%E8%87%AA%E5%91%BD%E5%90%8D%EF%BC%8C%E7%AC%A6%E5%90%88%E5%91%BD%E5%90%8D%E8%A7%84%E5%88%99%E5%8D%B3%E5%8F%AF%EF%BC%89">8. 创建Hive元数据数据库hive_1

可自命名，符合命名规则即可

create database hive_1;

二、Hive安装配置（使用hadoop用户）

hive-3.1.2-bin.tar.gz%E5%88%B0hadoop01%EF%BC%88%E6%88%96%E8%80%85%E5%85%B6%E4%BB%96%E8%99%9A%E6%8B%9F%E6%9C%BA%EF%BC%89">1. 上传压缩包apache-hive-3.1.2-bin.tar.gz到hadoop01（或者其他虚拟机）

在本文最上方资源可以免费下载！！

2. 在安装目标文件夹内解压缩安装包

tar -zxvf apache-hive-3.1.0-bin.tar.gz

hive%E9%85%8D%E7%BD%AE%E6%96%87%E4%BB%B6hive-site.xml">3. 编辑hive配置文件hive-site.xml

（路径在hive安装目录的conf下）

cp hive-default.xml.template hive-site.xml

vi hive-site.xml

第1步，先删除hive-site.xml中的大部分内容，删除后的内容如下图所示：

第2步：在<configuration>标签对中添加以下内容

注意填写的value值根据自己的数据库名、账号密码修改！！！

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!--
   Licensed to the Apache Software Foundation (ASF) under one or more
   contributor license agreements.  See the NOTICE file distributed with
   this work for additional information regarding copyright ownership.
   The ASF licenses this file to You under the Apache License, Version 2.0
   (the "License"); you may not use this file except in compliance with
   the License.  You may obtain a copy of the License at

       http://www.apache.org/licenses/LICENSE-2.0

   Unless required by applicable law or agreed to in writing, software
   distributed under the License is distributed on an "AS IS" BASIS,
   WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
   See the License for the specific language governing permissions and
   limitations under the License.
-->
<configuration>
    <!-- WARNING!!! This file is auto generated for documentation purposes ONLY! -->
    <!-- WARNING!!! Any changes you make to this file will be ignored by Hive.   -->
    <!-- WARNING!!! You must make your changes in hive-site.xml instead.         -->
    <!-- Hive Execution Parameters -->
    <property>
        <name>hive.metastore.warehouse.dir</name>
        <value>/usr/hive/warehouse</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionURL</name>
        <value>jdbc:mysql://192.168.9.10:3306/hive_1?characterEncoding=UTF-8</value>
        </description>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionUserName</name>
        <value>ryx</value>
    <property>
        <name>javax.jdo.option.ConnectionDriverName</name>
        <value>com.mysql.jdbc.Driver</value>
    </property>
    <property>
        <name>javax.jdo.option.ConnectionPassword</name>
        <value>ryx123</value>
    </property>
</configuration>

4. 解压并导入MySQL依赖包

 在我上传的资源可以免费下载

https://download.csdn.net/download/m0_67830223/89512921?spm=1001.2014.3001.5503

tar -zxcf mysql-connector-java-5.1.27.tar.gz 

cd mysql-connector-java-5.1.27/  //进入解压的文件目录

sudo cp mysql-connector-java-5.1.27-bin.jar ~/apache-hive-3.1.0-bin/lib/ //将mysql的jar包复制到hive的lib目录下

5. 手动初始化元数据库（Hive2以上版本需要）

schematool -dbType mysql -initSchema

script completed

hive%E5%90%AF%E5%8A%A8%E7%9A%84%E7%8E%AF%E5%A2%83%E5%8F%98%E9%87%8F">6. 配置hive启动的环境变量

export HIVE_HOME=/home/2130502441ryx/apache-hive-3.1.0-bin

export PATH=$HADOOP_HOME/sbin:$PATH:$HIVE_HOME/bin

7. 启动hive

​​​​​​​hive


http://www.niftyadmin.cn/n/5537233.html

相关文章

从 Spark 离线数仓到 Flink 实时数仓：实战指南

从 Spark 离线数仓到 Flink 实时数仓：实战指南

目录 一、为啥要从 Spark 离线数仓转到 Flink 实时数仓 二、Spark 和 Flink 的差别 三、Flink 的厉害之处 四、咋学 Flink 实时数仓 （一）基础知识准备 （二）从 Spark 到 Flink 的过渡 （三）实践项目与案例分析 五、Flink 实时数仓的开发场景案例 （一）实时日志分析…
阅读更多...
Python文字数字转换利器: word2number库详解

Python文字数字转换利器: word2number库详解

Python文字数字转换利器: word2number库详解 1. word2number简介2. 安装3. 基本使用3.1 基本数字转换3.2 序数转换3.3 小数转换3.4 负数转换 4. 高级用法4.1 处理混合表达4.2 处理大写字母 5. 错误处理6. 实际应用示例6.1 文本数据预处理6.2 简单计算器 7. 局限性8. 总结 在处理…
阅读更多...
Java面试八股之MySQL的pconenct和connect有什么区别

Java面试八股之MySQL的pconenct和connect有什么区别

MySQL的pconenct和connect有什么区别 在PHP中&#xff0c;mysql_pconnect() 和 mysql_connect() 是用来建立与MySQL数据库服务器连接的两个函数&#xff0c;它们的主要区别在于连接的持久性。 mysql_connect(): 这个函数每次调用都会尝试创建一个新的数据库连接。 当PHP脚本…
阅读更多...
CentOS中使用SSH远程登录

CentOS中使用SSH远程登录

CentOS中使用SSH远程登录 准备工作SSH概述SSH服务的安装与启动建立SSH连接SSH配置文件修改SSH默认端口SSH文件传输 准备工作 两台安装CentOS系统的虚拟机 客户机&#xff08;192.168.239.128&#xff09; 服务器&#xff08;192.168.239.129&#xff09; SSH概述 Secure S…
阅读更多...
vue中一周的时间选择多个阶段（手动表格选择）

vue中一周的时间选择多个阶段（手动表格选择）

先给大家看一下效果图 源代码 <template><div style"width: 45%"><div style"width: 100%"><div class"time"><div class"timeleft">星期/时间</div><div class"timeright"><…
阅读更多...
HTMLCSS（入门）

HTMLCSS（入门）

HTML <html> <head><title>第一个页面</title></head><body>键盘敲烂&#xff0c;工资过万</body> </html> <!DOCTYPE>文档类型声明&#xff0c;告诉浏览器使用哪种HTML版本显示网页 <!DOCTYPE html>当前页面采取…
阅读更多...
JavaScript基础-函数（完整版）

JavaScript基础-函数（完整版）

文章目录 函数基本使用函数提升函数参数arguments对象&#xff08;了解&#xff09;剩余参数(重点)展开运算符(...) 逻辑中断函数参数-默认参数函数返回值-return作用域(scope)全局作用域局部作用域变量的访问原则垃圾回收机制闭包 匿名函数函数表达式立即执行函数 箭头函数箭头…
阅读更多...
springboot封装请求参数json的源码解析

springboot封装请求参数json的源码解析

源码位置&#xff1a; org.springframework.web.servlet.mvc.method.annotation.AbstractMessageConverterMethodArgumentResolver#readWithMessageConverters(org.springframework.http.HttpInputMessage, org.springframework.core.MethodParameter, java.lang.reflect.Type…
阅读更多...
最新文章

Copyright @ 2022~2023