码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • hive数据仓库基础语法实战操作


    文章目录

      • 1 Hive数据类型
        • 1.1 基础数据类型
        • 1.1 复杂数据类型
      • 1 表操作
      • 2 查询
      • 2 数据导入
        • 2.1 本地文件系统导入
        • 2.2 从hdfs中导入数据到hive

    1 Hive数据类型

    1.1 基础数据类型

    类型Java数据类型描述
    tinyintbyte8位有符号整型,-128~127
    smallintshort16位有符号整型,-32768~32767
    intint32位有符号整型,-231 ~ 231 -1
    bigintlong64位有符号整型, -263+1 ~ 2 63 -1
    binary二进制数据类型,目前限制位8MB
    floatfloat32位二进制浮点型
    doubledouble64位二进制浮点型
    decimal(percision,scale)10进制精确数字类型。percision:表示最多可以表示多少位数字,1<=percision<=38。scale:表示小数部分的位数,0<=scale<=38,如果不指定两个参数,则默认位decimal(10,0)
    varchar(n)变长字符类型,n为长度,1~65535
    char(n)固定长度字符类型,n为长度,最大为255.长度不足则会填充空格,但空格不参与比较
    stringstring字符串类型,目前长度为8MB
    date日期类型,格式为 yyyy-mm-dd 00:00:00.000~9999-12-31 23:59:59.999,精确到秒
    timestamp
    booleanbooleanboolean类型,取值True、False

    1.1 复杂数据类型

    类型定义方法构造方法
    array
    map
    struct
    https://www.douyin.com/user/MS4wLjABAAAAC5NbA1JCeuUfq9xXyi9UkRPlxTXxli4XWux9vqF46D4zcl0vlbs_8dmajmgLwAuJ?is_full_screen=0&modal_id=7037696402289380645&vid=7037406499148238091

    1 表操作

    创建表

    create table my_user(id int,name string,phone string) row format delimited fields terminated by '\t';
    
    • 1

    表重命名

    alter table my_user rename to my_users;
    
    • 1

    正则匹配查找表

    show tables '*user*';
    
    • 1

    查看表结构

    desc my_user;
    
    • 1

    增加表字段

    # 添加email
    alter table my_user add columns (email string);
    
    • 1
    • 2

    删除表

    drop table my_users;
    
    • 1

    2 查询

    2 数据导入

    2.1 本地文件系统导入

    首先,我们在本地文件系统创建测试内容

    vim /home/charles/user.txt
    
    • 1
    1	charles	101
    2	tom	102
    3	jack	103
    
    • 1
    • 2
    • 3

    然后在hive终端执行

    load data local inpath '/home/charles/user.txt' overwrite into table my_user;
    
    • 1

    查看导入的数据

    hdfs dfs -cat /user/hive/warehouse/my_user/user.txt;
    
    • 1

    2.2 从hdfs中导入数据到hive

    创建表

    create table my_user_hdfs(id int,name string,phone string) row format delimited fields terminated by '\t';
    
    • 1

    导入数据

    load data inpath '/user/hive/warehouse/my_user/user.txt' overwrite into table my_user_hdfs;
    
    • 1

    查看数据

    hdfs dfs -cat /user/hive/warehouse/my_user_hdfs/user.txt
    
    • 1

    参考地址:
    https://www.helloworld.net/p/1015206641

  • 相关阅读:
    ElasticsearchRestTemplate 和ElasticsearchRepository 的使用
    程序员的颈椎病怎么办?
    机器学习网络模型绘图模板
    【FIW2022精彩回顾】国泰君安新一代核心交易系统网络底座建设实践
    音频 控制生成 图像 训练实例
    C#获取驱动器信息
    软件测试面试题
    C语言入门Day_23 指针的使用
    【计算机毕业设计】​206校园顺路代送微信小程序
    手把手让你实现postfix+extmail+mysql虚拟用户邮件体系
  • 原文地址:https://blog.csdn.net/zx77588023/article/details/127126439
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号