Yarn 的日志聚集功能配置使用

时间:2022-07-26
本文章向大家介绍Yarn 的日志聚集功能配置使用，主要内容包括其使用实例、应用技巧、基本知识点总结和需要注意事项，具有一定的参考价值，需要的朋友可以参考一下。

需要 hadoop 的安装目录/etc/hadoop/yarn-site.xml 中进行配置

配置内容

  <property>
        <name>yarn.log-aggregation-enable</name>
        <value>true</value>
     </property>

     <property>
        <name>yarn.log-aggregation.retain-seconds</name>
        <value>640800</value>
     </property>

配置好了之后 需要重新启动 nodemanager resourcemanager historyserver 才可以生效

重新启动之后，在Hadoop上面使用yarn 运行wordcount程序

命令:

bin/yarn jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.0.jar wordcount /user/zuoyan/mapreduce/wordcount/input/ /user/zuoyan/mapreduce/wordcount/output2

打开Hadoop的任务管理界面的日志信息

就可以看到，日志已经可以打印出来了

使用这种的好处 省去了以后去找日志信息查看的麻烦问题，能够比较直观的查看到错误信息！

这样Yarn的日志聚集功能就已经配置好了!

随机文章
本站知识点必读
最近更新