相关博客: Hadoop3.1.2 集群完全分布式安装 官方示例学习
概念日志聚集指的是应用运行完成以后,将程序运行日志信息上传到HDFS系统上。
配置在搭建Hadoop集群环境,修改yarn-site.xml,在该文件里面增加如下配置。
yarn.log-aggregation-enable
true
yarn.log-aggregation.retain-seconds
604800
其中:
- yarn.log-aggregation-enable:是否启用日志聚集功能。
- yarn.log-aggregation.retain-seconds:设置日志保留时间,单位是秒。
第一步:运行求PI的官方示例: 第二步:打开http://hcslave2:19888/jobhistory/
第三步: 第四步: