Yarn日志过大无法拉取java.lang.RuntimeException: The total log size is too large.The log size limit is 10240M

yarn拉取日志命令:

yarn logs -applicationId application_1624172467753_3988 -appOwner root -size_limit_mb -1 > ./application_1624172467753_3988.log

加 -appOwner 是防止权限问题


但是可能会遇到日志过大无法拉取的情况(默认最大10G)

日志过大


解决办法:加参数 -size_limit_mb -1即可

yarn logs -applicationId application_1624172467753_3988 -appOwner root -size_limit_mb -1 > ./application_1624172467753_3988.log

加参数

看下大小:
log大小

这个时候不建议打开看,应该head或者tail最前或者最后的部分,追加到一个文件内打开看。或者可以grep查看
tail

猜你喜欢

转载自blog.csdn.net/qq_44491709/article/details/118355586