关于hadoop:hadoop配置history-server

history server配置:
mapred-site.xml

<!-- 指定mapreduce运行在yarn上 -->
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
    <!-- 历史服务器地址 -->
    <property>
        <name>mapreduce.jobhistory.address</name>
        <value>hadoop-4:10020</value>
    </property>
    <!-- 历史服务器web端地址 -->
    <property>
        <name>mapreduce.jobhistory.webapp.address</name>
        <value>hadoop-4:19888</value>
    </property>

yarn-site.xml

<!--日志汇集-->
 <property>
   <name>yarn.log-aggregation-enable</name>
   <value>true</value>
 </property>
<!--日志汇集服务器地址-->
 <property>
   <name>yarn.log.server.url</name>
   <value>http://hadoop-4:19888/jobhistory/logs</value>
 </property>
<!--日志保留工夫-->
 <property>
   <name>yarn.log-aggregation.retain-seconds</name>
   <value>6048000</value>
 </property>

启动history server
mapred --daemon start historyserver
history server web端
http://hadoop-4:19888/jobhistory

评论

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

这个站点使用 Akismet 来减少垃圾评论。了解你的评论数据如何被处理