当前位置:Gxlcms > 数据库问题 > Spark学习之路 (二十)SparkSQL的元数据

Spark学习之路 (二十)SparkSQL的元数据

时间:2021-07-01 10:21:17 帮助过:101人阅读

。我们要用SparkSQL去构建数据仓库的时候,必须依赖于Hive。

回到顶部

二、Spark-SQL脚本

如果用户直接运行bin/spark-sql命令。会导致我们的元数据有两种状态:

1、in-memory状态:

  如果SPARK-HOME/conf目录下没有放置hive-site.xml文件,元数据的状态就是in-memory

2、hive状态:

 如果我们在SPARK-HOME/conf目录下放置了,hive-site.xml文件,那么默认情况下

 spark-sql的元数据的状态就是hive.

 

Spark学习之路 (二十)SparkSQL的元数据

标签:状态   home   概述   gpo   导致   依赖   数据仓库   目录   post   

人气教程排行