当前位置:Gxlcms > 数据库问题 > 基于spark1.4的Spark-Sql

基于spark1.4的Spark-Sql

时间:2021-07-01 10:21:17 帮助过:15人阅读

Author: kwu 

基于spark1.4的Spark-Sql,spark1.4.1在7月15刚发布,提供较好sql支持


1、如何启动Spark-Sql

启动脚本如下

#!/usr/bin/env bash
read  -p "enter your username:" user
read -s -p "enter your password:" pass

sparksql -u jdbc:hive2://bdc:10000 -n $user -p $pass

运行后,按照提示输入用户名与密码,进入查询终端。

技术分享 

 

2、进入Spark-Sql查询,测试如下:

select day,count(*) from ods.tracklog groupby day;

 技术分享技术分享


hive中运行

select day,count(*) from ods.tracklog groupby day;

 技术分享技术分享

 

3、查看Spark-Sql监控

http://bdc:4040

 技术分享技术分享

查看查询计划

 技术分享技术分享

 

退出登录

!q

 技术分享技术分享


版权声明:本文为博主原创文章,未经博主允许不得转载。

基于spark1.4的Spark-Sql

标签:spark

人气教程排行