当前位置:Gxlcms > 数据库问题 > spark启动后出现“JAVA_HOME not set” 异常和"org.apache.hadoop.security.AccessControlException"异常

spark启动后出现“JAVA_HOME not set” 异常和"org.apache.hadoop.security.AccessControlException"异常

时间:2021-07-01 10:21:17 帮助过:5人阅读

jps命令,主节点上有Master进程,其他子节点上有Work进行,登录Spark管理界面查看集群状态(主节点):http://master01:8080/

 

到此为止,Spark集群安装完毕.

1.注意如果遇到 “JAVA_HOME not set” 异常可以在sbin目录下的spark-config.sh 文件中加入如下配置:

export JAVA_HOME=XXXX

 

2.如果遇到Hadoop HDFS的写入权限问题:

org.apache.hadoop.security.AccessControlException

解决方案: hdfs-site.xml中添加如下配置,关权限验证

  <property>
        <name>dfs.permissions</name>
        <value>false</value>
  </property>  

spark启动后出现“JAVA_HOME not set” 异常和"org.apache.hadoop.security.AccessControlException"异常

标签:cep   org   bin   work   文件中   sbin   方案   data   配置   

人气教程排行