关于hadoop:hadoop配置history-server

2次阅读

共计 780 个字符，预计需要花费 2 分钟才能阅读完成。

history server 配置:
mapred-site.xml

<!-- 指定 mapreduce 运行在 yarn 上 -->
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
    <!-- 历史服务器地址 -->
    <property>
        <name>mapreduce.jobhistory.address</name>
        <value>hadoop-4:10020</value>
    </property>
    <!-- 历史服务器 web 端地址 -->
    <property>
        <name>mapreduce.jobhistory.webapp.address</name>
        <value>hadoop-4:19888</value>
    </property>

yarn-site.xml

<!-- 日志汇集 -->
 <property>
   <name>yarn.log-aggregation-enable</name>
   <value>true</value>
 </property>
<!-- 日志汇集服务器地址 -->
 <property>
   <name>yarn.log.server.url</name>
   <value>http://hadoop-4:19888/jobhistory/logs</value>
 </property>
<!-- 日志保留工夫 -->
 <property>
   <name>yarn.log-aggregation.retain-seconds</name>
   <value>6048000</value>
 </property>

启动 history server
mapred --daemon start historyserver
history server web 端
http://hadoop-4:19888/jobhistory

正文完