伪分布式问题二(配置日志服务)

1.引出

1.1点击logs无法显示日志信息

在这里插入图片描述

2.解决

2.1配置yarn-site.xml

执行命令:vi yarn-site.xml
添加如下文本:

<!-- 日志聚集功能使能 -->
<property>
<name>yarn.log-aggregation-enable</name>
<value>true</value>
</property>

<!-- 日志保留时间设置7天 -->
<property>
<name>yarn.log-aggregation.retain-seconds</name>
<value>604800</value>
</property>

2.2关闭NodeManager 、ResourceManager和HistoryManager

执行命令:
1.sbin/yarn-daemon.sh stop resourcemanager
2.sbin/yarn-daemon.sh stop nodemanager
3.sbin/mr-jobhistory-daemon.sh stop historyserver

2.3启动NodeManager 、ResourceManager和HistoryManager

执行命令:
1.sbin/yarn-daemon.sh start resourcemanager
2.sbin/yarn-daemon.sh start nodemanager
3.sbin/mr-jobhistory-daemon.sh start historyserver

2.4删除HDFS上已经存在的输出文件

执行命令:bin/hdfs dfs -rm -R /user/lsl/output
在这里插入图片描述

2.5执行WordCount程序

执行命令: hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount /user/lsl/input /user/lsl/output

2.6查看日志

浏览器中查看:http://[ip地址]:19888/jobhistory
在这里插入图片描述

注:当没有配置Windows的hosts文件映射时点击1中的logs还是无效!!hosts文件在C:\Windows\System32\drivers\etc目录下

版权声明:本博客为记录本人自学感悟,转载需注明出处!
https://me.csdn.net/qq_39657909

已标记关键词 清除标记
©️2020 CSDN 皮肤主题: 技术黑板 设计师:CSDN官方博客 返回首页