定时任务报警通知解决方案详解

2年前 (2022) 程序员胖胖胖虎阿

186 0 0

简介：本文详细介绍定时任务通知的解决方案，以及市面上常见的开源定时任务通知方案对比。什么是定时任务定时任务是每个业务常见的需求，比如每分钟扫描超时支付的订单，每小时清理一次数据库历史数据，每天统计前一天的数据并生成报表等等。随着微服务和云计算的兴起，定时任务技术也是发展迅速，不仅能做单机的定时任务，而且在分布式系统下应用也很广泛，成为了业务做兜底、数据处理的第一选择。定时任务为什么需要通知定时任务现在在业务数据处理中的比重越来越重，如果业务数据处理失败了，需要及时通知到业务方，确保了服务的可靠性和稳定性。同时，好的定时任务通知系统，还能分析任务失败的原因（比如堆栈信息）并通知给业务方，帮助用户快速定位问题。
定时任务报警通知解决方案详解
根据通知的类型，大概可以有以下几类：成功通知：任务执行成功，把结果通知给用户。比如统计前一天的数据并把GaaP结果通过短信等渠道发送给对应负责人。超时通知：任务执行超时，通知用户。失败通知：任务执行失败，通知用户。机器异常通知：运行的机器下线或者繁忙，通知用户。定时任务通知解决方案自研定时任务报警通知如果是自研的定时任务系统，或者使用了开源定时任务框架（比如Quartz），想要增加报警通知能力，我们可以采取什么方案呢？从实时性角度来看，短信和电话通知实时性最高，但是这两种方案需要比较大的成本，比如短信通知需要短信平台。如果没有短信平台，我们也可以采用邮件和webhook通知。邮件每个邮件服务器都由SMTP服务器和POP3服务器构成，其中SMTP服务器负责发邮件的请求，而POP3负责收邮件的请求。通过SMTP与POP3即可实现邮件的收发。
定时任务报警通知解决方案详解
邮件发送原理图配置邮件服务器以网易163邮件为例，在发送方邮箱设置里，开启POP3/SMTP服务

以Java代码为例，发送邮件的demoimport org.junit.Test;
import javax.mail.Message;
import javax.mail.Session;
import javax.mail.Transport;
import javax.mail.internet.InternetAddress;
import javax.mail.internet.MimeMessage;
import java.io.PrintWriter;
import java.io.StringWriter;
import java.util.Properties;
public class SendMailDemo {

public static void main(String[] args) throws Exception {
    Properties prop = new Properties();
    prop.setProperty("mail.host","smtp.163.com");//设置发送方邮箱服务器
    prop.setProperty("mail.transport.protocol","smtp");//邮件发送协议
    prop.setProperty("mail.smtp.auth","true");//需要验证用户名密码
    Session session = Session.getDefaultInstance(prop);
    Transport ts = session.getTransport();
    String mailUser = "xxx@163.com"; //邮箱的账号
    String mailPasswd = "123456789"; //邮箱的密码
    ts.connect("smtp.163.com", mailUser, mailPasswd);
    MimeMessage message = new MimeMessage(session);
    message.setFrom(new InternetAddress(mailUser));
    //收件人的邮箱地址
    message.setRecipient(Message.RecipientType.TO,new InternetAddress("xxxx@163.com"));
    //邮件的标题
    message.setSubject("自定义通知");
    message.setContent("<h1 style='color:black'>邮件通知发送成功!</h1>","text/html;charset=UTF-8");
    ts.sendMessage(message,message.getAllRecipients());
    ts.close();
}

} 3. 运行一次，可以收到邮件
定时任务报警通知解决方案详解
WebHook钉钉、企业微信、飞书，支持通过webhook方式发送通知到群里。下面以钉钉webhook为例首先在钉钉群里，创建一个机器人群设置->智能群助手

添加机器人->自定义webhook接入

定时任务报警通知解决方案详解
直接通过http调用webhook链接即可，以Java代码为例，demo如下：/**

@Auther: tangtao
@Date: 2022/8/19 10:46
@Description:发送钉钉通知
*/

public class WebhookDemo {

public static void main(String[] args) throws Exception {
    CloseableHttpClient httpClient = HttpClientBuilder.create().build();
    HttpPost httpPost = new HttpPost("https://oapi.dingtalk.com/robot/send?access_token=fcf4c30596a8b26d76a6d4dcd658b708066e23e877b285c784db2360660c97e0");
    httpPost.setHeader("Content-Type", "application/json;charset=utf8");
    JSONObject result = new JSONObject();
    JSONObject text = new JSONObject();
    text.put("content", "测试钉钉发送定时任务通知");
    result.put("text", text);
    result.put("msgtype", "text");
    String jsonString = JSON.toJSONString(result);
    StringEntity entity = new StringEntity(jsonString, "UTF-8");
    httpPost.setEntity(entity);
    CloseableHttpResponse response = null;
    response = httpClient.execute(httpPost);
    HttpEntity responseEntity = response.getEntity();
    System.out.println("响应结果:" + EntityUtils.toString(responseEntity));
}

}3. 运行一次，可以在钉钉群里看到通知消息
定时任务报警通知解决方案详解
开源任务调度系统的通知解决方案ElasticJobElasticJob是一款基于 Quartz 开发，依赖 Zookeeper 作为注册中心、轻量级、无中心化的分布式任务调度框架，目前已经通过 Apache 开源，使用ElasticJob可以快速实现分布式任务调度。ElasticJob只需配置定时任务的错误处理策略即可实现通知功能。目前ElasticJob支持邮件、钉钉、微信三种通知渠道。接入步骤以钉钉通知为例引入pom

    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter</artifactId>
        <version>2.2.0.RELEASE</version>
    </dependency>
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-web</artifactId>
        <version>2.2.0.RELEASE</version>
    </dependency>
    <dependency>
        <groupId>org.apache.shardingsphere.elasticjob</groupId>
        <artifactId>elasticjob-lite-spring-boot-starter</artifactId>
        <version>3.0.0-RC1</version>
    </dependency>
    <dependency>
        <groupId>org.apache.shardingsphere.elasticjob</groupId>
        <artifactId>elasticjob-error-handler-dingtalk</artifactId>
        <version>3.0.0-RC1</version>
    </dependency>新增Job/**

@Auther: tangtao
@Date: 2022/8/17 14:33
@Description: elastic job 失败后发送钉钉通知
*/

@Component
public class ErrorNoticeDingtalkJob implements SimpleJob {

@Override
public void execute(final ShardingContext shardingContext) {
    throw new RuntimeException(String.format("An exception has occurred in Job, The parameter is %s", shardingContext.getShardingParameter()));
}

}对定时任务进行配置jobs:

errorNoticeDingtalkJob:
  elasticJobClass: com.springboottemplate.elasticjob.job.ErrorNoticeDingtalkJob
  overwrite: true
  shardingTotalCount: 3
  shardingItemParameters: 0=Beijing,1=Shanghai,2=Guangzhou
  jobErrorHandlerType: DINGTALK
  jobBootstrapBeanName: errorNoticeDingtalkBean
  props:
    dingtalk:
      webhook: you_webhook
      keyword: you_keyword
      secret: you_secret
      connectTimeout: 3000
      readTimeout: 5000 通知功能缺点ElasticJob没有提供控制台来配置定时任务的通知，需要在配置文件里针对每个任务单独配置，配置成本比较高。而且想要修改定时任务的通知配置，还需要修改配置重启服务才能生效，可维护性低。XXL-JOBxxl-job，这是出自大众的开源项目，官网上介绍这是一个轻量级分布式任务调度框架，其核心设计目标是开发迅速、学习简单、轻量级、易扩展，与SpringBoot有非常好的集成，而且监控界面就集成在调度中心，界面又简洁，对于企业维护起来成本不高，默认支持失败的邮件告警。这就使很多企业选择xxl-job做调度平台。接入步骤XXL-JOB默认支持失败的邮件告警，只需要在控制台配置对应邮箱即可。

定时任务报警通知解决方案详解
邮件通知也进行了排版：

其他通知渠道XXL-JOB可以扩展短信、钉钉等方式，但是需要开发者自己手动实现。如果需要新增一种告警方式，需要新增一个通知类实现 “com.xxl.job.admin.core.alarm.JobAlarm” 接口即可对比ElasticJobXXL-JOB可以通过控制台来配置每个任务的通知配置，动态生效，接入成本低，可维护性高，比ElasticJob方便很多。但是当前版本控制台只支持邮件通知，邮件通知响应速度比较慢，不适合用在核心在线业务的失败通知。企业级通知解决方案Schedulerx2.0通知管理阿里云任务调度SchedulerX2.0是阿里巴巴自研的基于Akka架构的一站式任务调度平台，兼容开源XXL-JOB、ElasticJob、Quartz（规划中），提供了商业级的通知管理服务。通知功能的优势相对于ElasticJob、XXL-JOB等分布式任务调度框架的通知功能相比，SchedulerX2.0通知功能具有以下几大优势：
定时任务报警通知解决方案详解
多元化的通知通道当前支持短信、电话、邮箱、webhook（钉钉、企业微信、飞书）。丰富的通知类型任务执行失败通知任务执行超时通知无可用机器通知机器繁忙通知任务执行结果通知快速响应通知内容更全面、更智能的通知管理能力，使通知的响应变得更迅速，提高问题解决的速度，减少因业务异常造成的损失。以失败通知为例，通知内容不仅记录了任务的基本信息，还记录了失败原因，方便运维人员快速定位问题。
定时任务报警通知解决方案详解

定时任务报警通知解决方案详解

定时任务报警通知解决方案详解
强大的通知查询功能SchedulerX2.0支持查询15天内通知历史记录，根据应用、任务、通知类型、通知渠道等多个条件查询的通知信息，能为任务的日常的维护提供参考与指导作用。支持多种通知对象Schedulerx2.0通知管理目前支持通知联系人与通知联系人组两种通知对象。Schedulerx2.0对通知联系人进行统一管理，用户可以根据自身需要灵活的配置任务的通知对象，减少了通知对象配置的复杂度。配置简单、学习成本低SchedulerX2.0无需用户新增任何代码，在控制台上即可完成所有的报警通知配置，上手速度快、难度低、学习成本几乎为零。低成本与免运维Schedulerx2.0通知管理功能不收取任何费用。其更智能、更全面的通知管理能力可以有效降低系统的运维成本和运维人员的时间成本。通知功能核心流程定时任务在某种状态下会触发通知，通过接入层的统一Api将通知信息发送给SchedulerX2.0的通知管理平台。通知管理平台对通知进行接收、保存。再基于任务的通知配置规则以邮件、短信、语音等方式将定时任务通知推送给用户。
定时任务报警通知解决方案详解
如何配置通知配置联系人组目前Schedulerx2.0的定时任务默认使用的是应用的通知渠道与联系人。想要配置任务的通知渠道与联系人只需要配置对应应用的通知渠道以及通知联系人即可。新增联系人登录Schedulerx2.0控制台>通知管理>通知联系人。在联系人页签，单击新建联系人，填写联系人相关信息即可。
定时任务报警通知解决方案详解
2. 新增联系人组登录Schedulerx2.0控制台>通知管理>通知联系人。在联系人组页签，单击新建联系组，填写组名称，绑定联系人即可。

应用绑定联系人组登录Schedulerx2.0控制台>应用管理。找到对应的应用，在通知配置中绑定对应的通知联系人组即可。
定时任务报警通知解决方案详解
配置通知类型登录Schedulerx2.0控制台>任务管理。新增或者编辑任务时候，在通知配置中选择对应的通知类型即可。

通知记录查询SchedulerX2.0支持查询15天内通知记录，根据记录的任务报警信息与通知信息，开发者可以了解到任务一段时间内的健康状态，能为任务的日常的维护提供参考与指导作用。
定时任务报警通知解决方案详解
与开源方案的对比 XXL-JOBElasticJobSchedulerX通知渠道邮箱邮箱、钉钉、企业微信短信、电话、邮箱、webhook（钉钉、飞书、企业微信）可视化配置支持不支持支持通知类型失败通知失败通知成功通知失败通知超时通知机器不可用通知等联系人组不支持不支持支持通知记录查询不支持不支持支持原文链接：https://click.aliyun.com/m/10...本文为阿里云原创内容，未经允许不得转载。