码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 【Hadoop】hive安装


    hive安装

    • 一、安装
    • 二、安装
      • 2.1、上传解压
      • 2.2、添加Hive核心配置
      • 2.3、下载连接MySQL的驱动包到hive的lib目录下
      • 2.4、在MySQL上创建Hive的元数据存储库
      • 2.5、设置环境变量
      • 2.6、执行Hive的初始化工作
      • 2.7、启动Hive

    一、安装

    之前的准备工作

    1. 需要安装好java 运行环境 JDK 安装教程
    2. 需要搭建配置好Hadoop集群并启动
    3. 在hadoop1(master)这个虚拟机节点上安装MySQL服务 安装教程

    官网下载地址
    本文使用的版本

    二、安装

    2.1、上传解压

     tar -zxvf apache-hive-3.1.3-bin.tar.gz 
    
    • 1

    2.2、添加Hive核心配置

    
    
    <configuration>
    	
    	<property>
    		<name>javax.jdo.option.ConnectionURLname>
    		<value>jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true&useSSL=false&useUnicode=true&characterEncoding=UTF8value>
    		<description>MySQLdescription>
    	property>
    	<property>
    		<name>javax.jdo.option.ConnectionDriverNamename>
    		<value>com.mysql.jdbc.Drivervalue>
    	property>
    	<property>
    		<name>javax.jdo.option.ConnectionUserNamename>
    		<value>rootvalue>
    	property>
    	<property>
    		<name>javax.jdo.option.ConnectionPasswordname>
    		<value>rootvalue>
    	property>
    
    	
    	<property>
    		<name>hive.metastore.warehouse.dirname>
    		<value>/hive/warehousevalue>
    	property>
    
    	<property>
    		<name>hive.exec.scratchdirname>
    		<value>/hive/tmpvalue>
    	property>
    	<property>
    		<name>hive.querylog.locationname>
    		<value>/hive/logvalue>
    	property>
    	
    	<property>
    		<name>hive.server2.thrift.portname>
    		<value>10000value>
    	property>
    	<property>
    		<name>hive.server2.thrift.bind.hostname>
    		<value>0.0.0.0value>
    	property>
    	<property>
    		<name>hive.server2.webui.hostname>
    		<value>0.0.0.0value>
    	property>
    	
    	<property>
    		<name>hive.server2.webui.portname>
    		<value>10002value>
    	property>
    	<property>
    		<name>hive.server2.long.polling.timeoutname>
    		<value>5000value>
    	property>
    	
    	<property>
    		<name>hive.server2.enable.doAsname>
    		<value>falsevalue>
    	property>
    	
    	<property>
    		<name>datanucleus.schema.autoCreateAllname>
    		<value>truevalue>
    	property>
    	<property>
    	 	<name>datanucleus.schema.autoCreateSchemaname>
    		 <value>truevalue>
    	property>
    	<property>
    		<name>datanucleus.schema.autoCreateTablesname>
    		<value>truevalue>
    	property>
    	<property>
    		<name>datanucleus.schema.autoCreateColumnsname>
    		<value>truevalue>
    	property>
    	<property>
    		<name>datanucleus.fixedDatastorename>
    		<value>falsevalue>
    	property>
    
    	<property>
    		<name>hive.execution.enginename>
    		<value>mrvalue>
    	property>
    
    	<property>
    		<name>hive.zookeeper.quorumname>
    		<value>doit01,doit02,doit03value>
    	property>
    
    configuration>
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24
    • 25
    • 26
    • 27
    • 28
    • 29
    • 30
    • 31
    • 32
    • 33
    • 34
    • 35
    • 36
    • 37
    • 38
    • 39
    • 40
    • 41
    • 42
    • 43
    • 44
    • 45
    • 46
    • 47
    • 48
    • 49
    • 50
    • 51
    • 52
    • 53
    • 54
    • 55
    • 56
    • 57
    • 58
    • 59
    • 60
    • 61
    • 62
    • 63
    • 64
    • 65
    • 66
    • 67
    • 68
    • 69
    • 70
    • 71
    • 72
    • 73
    • 74
    • 75
    • 76
    • 77
    • 78
    • 79
    • 80
    • 81
    • 82
    • 83
    • 84
    • 85
    • 86
    • 87
    • 88
    • 89
    • 90
    • 91
    • 92
    • 93
    • 94
    • 95
    • 96

    2.3、下载连接MySQL的驱动包到hive的lib目录下

    maven仓库
    在这里插入图片描述

    2.4、在MySQL上创建Hive的元数据存储库

    create database hive;
    
    • 1

    2.5、设置环境变量

    export HIVE_HOME=/usr/work/hive/3.1.3
    export PATH=.:$HIVE_HOME/bin:
    
    • 1
    • 2

    2.6、执行Hive的初始化工作

    在bin目录下

    ./schematool -initSchema -dbType mysql
    
    • 1

    2.7、启动Hive

    hive
    
    • 1
  • 相关阅读:
    【知识点】怎么确定时间复杂度与空间复杂度
    jvm 面试题
    泽众APM性能监控软件
    【Linux】环境变量
    中小企业成本的会计核算方法
    代码随想录刷题|LeetCode 70. 爬楼梯(进阶) 322. 零钱兑换 279.完全平方数
    ardupilot 中常用的框架类及结构
    接口自动化测试思路和实战(1):编写线性测试脚本实战
    微信小程序开发详细步骤是什么?
    CocosCreator3.8研究笔记(二十三)CocosCreator 动画系统-动画编辑器相关功能面板说明
  • 原文地址:https://blog.csdn.net/lushixuan12345/article/details/126293384
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号