• Hive 使用达梦DM8 无法识别 “COMMENT” 问题


    1. 达梦数据库驱动 DmJdbcDriver18-8.1.2.192.jar 导入到 hive 的 lib 文件夹下

    2. 修改 hive 配置文件,增加 dm 数据库相关信息

      <property>
           <name>javax.jdo.option.ConnectionURL</name>
            <value>jdbc:dm://127.0.0.1:5236?SCHEMA=hive
           <description>
             JDBC connect string for a JDBC metastore.
             To use SSL to encrypt/authenticate the connection, provide database-specific SSL flag in the connection URL.
             For example, jdbc:postgresql://myhost/db?ssl=true for postgres database.
           </description>
       </property>
      
        <property>
           <name>javax.jdo.option.ConnectionDriverName</name>
           <value>dm.jdbc.driver.DmDriver</value>
           <description>Driver class name for a JDBC metastore</description>
         </property>
       <property>
      
       <property>
           <name>javax.jdo.option.ConnectionUserName</name>
           <value>SYSDBA</value>
           <description>Username to use against metastore database</description>
       </property>
      
       <property>
           <name>javax.jdo.option.ConnectionUserName</name>
           <value>SYSDBA</value>
           <description>Username to use against metastore database</description>
         </property>
       <property>
      
      • 1
      • 2
      • 3
      • 4
      • 5
      • 6
      • 7
      • 8
      • 9
      • 10
      • 11
      • 12
      • 13
      • 14
      • 15
      • 16
      • 17
      • 18
      • 19
      • 20
      • 21
      • 22
      • 23
      • 24
      • 25
      • 26
      • 27
      • 28
      • 29
    3. 在导入数据时,出现无法识别 “COMMENT” 关键字错误,报 return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask, MetaException(message:Add request failed : INSERT INTO COLUMNS_V2 …)错误,如下图:
      在这里插入图片描述
      (1)经过排查 hive lib包下 datanucleus-rdbms-4.1.19.jar 源代码,缺少 “COMMENT” 关键字
      datanucleus-rdbms-4.1
      (2)官方源码地址::链接
      (3)修改 org.datanucleus.store.rdbms.adapter 下的 BaseDatastoreAdapter类 或者 org/datanucleus/store/rdbms/adapter/SQLConstants.java 类,在
      SQL99_RESERVED_WORDS 增加 “COMMENT”
      在这里插入图片描述
      (4)重新打包后,替换Hive/lib下 的 datanucleus-rdbms-4.1.19.jar 包,重新执行hive命令即可成功
      (5)已经重新打包的 datanucleus-rdbms-4.1.19.jar 提取码:1234

    4. 与原作者沟通后,得到回复大概意思是 “COMMENT” 在SQL92、SQL99、SQL2003 标准中不是保留关键字,所以后续也不会增加这个关键字,如有需求自行添加打包使用。

      在这里插入图片描述

  • 相关阅读:
    Linux进程、Cgroup、容器的内存指标
    经济下行基建托底,偶数湖仓一体打造坚实新基建数字底座
    Linux 内核开发 - NetFilter
    Linux - 配置Linux用户的环境变量- Anaconda3的环境变量配置
    类的生命周期
    STM32网口学习
    Docker笔记-docker搭建nginx及移植
    【转载】快速搭建OpenGL环境!!!Windows10 + Visual Studio 2019 搭建OpenGL环境
    Redis——主从同步
    3倍通气的医用外科口罩,佩戴舒适过滤不打折
  • 原文地址:https://blog.csdn.net/qq_33772352/article/details/132848979