输入banner图图片脚本导航/分类

Spark学习之路 (二十)SparkSQL的元数据

。我们要用SparkSQL去构建数据仓库的时候,必须依赖于Hive。

回到顶部

二、Spark-SQL脚本

如果用户直接运行bin/spark-sql命令。会导致我们的元数据有两种状态:

1、in-memory状态:

  如果SPARK-HOME/conf目录下没有放置hive-site.xml文件,元数据的状态就是in-memory

2、hive状态:

 如果我们在SPARK-HOME/conf目录下放置了,hive-site.xml文件,那么默认情况下

 spark-sql的元数据的状态就是hive.

 

Spark学习之路 (二十)SparkSQL的元数据

标签:状态   home   概述   gpo   导致   依赖   数据仓库   目录   post