首页 > 其他 > 详细

Hadoop中的jobhistory配置与启动停止

时间:2021-07-09 12:47:37      阅读:12      评论:0      收藏:0      [点我收藏+]

jobhistory的配置

1、在yarn-site.xml中添加

<!-- 开启日志聚合 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>

2.在mapred-site.xml中添加

<!-- 设置jobhistoryserver 没有配置的话 history入口不可用 -->
<property>
    <name>mapreduce.jobhistory.address</name>
    <value>hadoop01:10020</value>
</property>

<!-- 配置web端口 -->
<property>
    <name>mapreduce.jobhistory.webapp.address</name>
    <value>hadoop01:19888</value>
</property>

<!-- 配置正在运行中的日志在hdfs上的存放路径 -->
<property>
    <name>mapreduce.jobhistory.intermediate-done-dir</name>
    <value>/history/done_intermediate</value>
</property>

<!-- 配置运行过的日志存放在hdfs上的存放路径 -->
<property>
    <name>mapreduce.jobhistory.done-dir</name>
    <value>/history/done</value>
</property>

 

jobhistory的启动与停止:

启动: 在hadoop/sbin/目录下执行
./mr-jobhistory-daemon.sh start historyserver

停止:在hadoop/sbin/目录下执行
./mr-jobhistory-daemon.sh stop historyserver

 

参考:

https://blog.csdn.net/xiaoduan_/article/details/79689882

Hadoop中的jobhistory配置与启动停止

原文:https://www.cnblogs.com/-courage/p/14989448.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!