Dr-Elephant 丢失部分 YARN JOB - 代码天地

Dr-Elephant 丢失部分 YARN JOB

其他 2020-02-25 10:36:16 阅读次数: 0

背景

job_1574701645518_0469 在MR HISTORY里是存在 PS. 注意这里是 26号开始的任务
在这里插入图片描述
但是在 dr-elephant 搜索不到

通过查看dr-elephant日志

在这里插入图片描述
在2019/11/25 目录下查找该任务，实际上该任务在 2019/11/26 目录

定位到时区原因

通过找资料，确认是时区问题
https://github.com/linkedin/dr-elephant/issues/360
在这里插入图片描述
需要修改 ./app-conf/FetcherConf.xml 文件，将默认的PST改成 Asia/Shanghai

阿武z

发布了53 篇原创文章 · 获赞 50 · 访问量 2万+

私信关注

猜你喜欢

转载自blog.csdn.net/xw514124202/article/details/103266649

Dr-Elephant 丢失部分 YARN JOB

Dr Elephant（HIVE JOB监控调优）安装使用

【yarn】job日志查看

通过 Dr-Elephant 监控异常HIVE任务并报警

flow of submitting a AM job to yarn

windows编译centos7部署大象医生 dr-elephant

Yarn 上提交的job对应的sql查询

ecplise提交JOB到spark on yarn/standalone

mapreduce job在yarn上的工作流程

MapReduce和yarn的job流程图

YARN假死处理（JOB超过10000个）

yarn中要看详细的job日志

Yarn的工作机制，以及MR Job提交运行过程

hadoop yarn的job提交流程源码分析

MapReduce job提交到Yarn的工作流程

Yarn的基础介绍以及job的提交流程

Hadoop之Windows环境下提交Job至YARN集群

Hadoop基础---MapReduce及YARN中job提交源码分析

hadoop集群 yarn 执行job的时候 nodemanager 获取不到cpu

Hadoop-Yarn-工作机制、job的提交流程

yarn问题记录-Initial job has not accepted any resources；

flink on yarn模式下两种提交job方式 flink on yarn模式下两种提交job方式

Yarn的架构和概念--通过Yarn调度job的完整执行流程

job

在window7中使用Intellij IDEA 提交job到Spark Yarn (模式)

spark-submit 以yarn-cluter 提交job 定位错误之旅

spark 在yarn执行job时一直报0.0.0.0:8030错误

spark 在yarn执行job时一直抱0.0.0.0:8030错误

[flink]#10_Flink Job @ Standalone、YARN、Mesos、K8S

通过yarn上的applicationId杀死hadoop中的任务，或通过hadoop job命令停止任务

今日推荐

周排行

AIZU 2224 Save your cats(并查集)

HTTP响应头状态码详解

Python socket编程（2）

MaxCompute Studio使用心得系列7—作业对比

Supervisor安装使用

LeetCode 164. Maximum Gap

mysql面试题: 一张表里面有ID自增主键，当insert了17条记录之后，删除了第15,16,17条记录，再把mysql重启，再insert一条记录，这条记录的ID是18还是15

nutch1.2 DeleteDuplicates IndexMerger 详解

OC - @property与setter,getter方法

SpringBoot @Transactional的rollbackFor属性

每日归档

更多

2024-09-19(0)

2024-09-18(0)

2024-09-17(0)

2024-09-16(0)

2024-09-15(0)

2024-09-14(0)

2024-09-13(0)

2024-09-12(0)

2024-09-11(0)

2024-09-10(0)