SPARKSQL3.0-Spark兼容多版本Hive源码分析

一、前言

阅读本节需要先掌握Catalog基础知识

Spark对Hive的所有操作都是通过获取Hive元数据[metastore]帮助spark构建表信息从而调用HDFS-API对原始数据的操作，可以说Spark兼容多版本Hive就是在兼容Hive的Metastore

二、源码分析

在catalog一节中我们知道spark对hive操作是通过HiveExternalCatalog，而HiveExternalCatalog对hive的DDL、DML操作都是使用内部的HiveClient变量，如下：

接下来我们看HiveUtils.newClientForMetadata函数：

protected[hive]