Dolphin+XXL-JOB监控Hadoop任务执行结果量级原创
# 1. 背景
- Hadoop任务调度:通过XXL-JOB调度Hadoop任务,但需要监控任务执行结果量级。
- XXL-JOB在调起Hadoop任务时,会将Hadoop执行日志存储在XXL-JOB的日志目录中。
- XXL-JOB的日志目录默认存储在执行器服务器:
/data/applogs/xxl-job/jobhandler/${DATE}/${id}(自己设定的)。 - 我们只需要找到该任务的调度id,就能通过该id找到对应的日志文件,然后通过日志文件分析出任务执行结果量级。
- XXL-JOB的调度id在数据库中表:xxl_job_log,通过trigger_time、job_group、job_id字段可以查到。