首页 > Windows开发 > 详细

windows下jdk、hadoop、Scala、Spark的调试环境配置(jdk路径的空格问题, /tmp/hive on HDFS should be writable问题)

时间:2019-11-09 00:15:04      阅读:101      评论:0      收藏:0      [点我收藏+]

1、首先是jdk的路径问题

为了和以后出现的hadoop,spark出现 路径带有空格导致 调用失败的情况, 直接把 jdk的路径 剪切到 没有空格的目录下。

D:\>echo %JAVA_HOME%
C:\Java\jdk1.8.0_202

 

 

技术分享图片

技术分享图片

 

 技术分享图片

 

 到这里,在cmd下,能 看到 scala -version和 spark-shell 。

技术分享图片

 

 

2、spark出现The root scratch dir: /tmp/hive on HDFS should be writable

%HADOOP_HOME%\bin\winutils.exe ls \tmp\hive
%HADOOP_HOME%\bin\winutils.exe chmod 777 \tmp\hive
%HADOOP_HOME%\bin\winutils.exe ls \tmp\hive

 

 

注意:如果程序是放在 D盘, 那么要在D盘执行以上命令。

技术分享图片

 

 

看到读写的权限都有了。

 

 

windows下jdk、hadoop、Scala、Spark的调试环境配置(jdk路径的空格问题, /tmp/hive on HDFS should be writable问题)

原文:https://www.cnblogs.com/wuyicode/p/11823657.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!