Flink重启策略

Love The Way You Lie 2021-12-24 03:27 302阅读 0赞

## Flink重启策略 ##

Flink支持不同的重启策略，可以控制在发生故障时如何重启新启动作业。

默认重启策略是通过Flink的配置文件设置的`flink-conf.yaml`。配置参数`restart-strategy`定义采用的策略。

如果未启用检查点，则使用“无重启”策略。如果激活了检查点并且尚未配置重启策略，则固定延迟策略将用于 `Integer.MAX_VALUE`重启尝试。

重启策略分为：固定延迟重启策略、故障率重启策略、无重启策略、后备重启策略。

#### 1.固定延迟重启策略 ####

固定延迟重启策略是尝试给定次数重新启动作业。如果超过最大尝试次数，则作业失败。在两次连续重启尝试之间，会有一个固定的延迟等待时间。

通过在flink-conf.yaml中配置参数：

# fixed-delay:固定延迟策略
    restart-strategy: fixed-delay
    
    # 尝试5次，默认Integer.MAX_VALUE
    restart-strategy.fixed-delay.attempts: 5
    
    # 设置延迟时间10s，默认为 akka.ask.timeout时间
    restart-strategy.fixed-delay.delay: 10s

如果想通过代码中修改：

ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();
    
    // 5表示最大重试次数为5次，10s为延迟时间
    env.setRestartStrategy(RestartStrategies.fixedDelayRestart(5,Time.of(10, TimeUnit.SECONDS)));

#### 2.故障率重启策略 ####

故障率重启策略在故障后重新作业，当设置的故障率（failure rate）超过每个时间间隔的故障时，作业最终失败。在两次连续重启尝试之间，重启策略延迟等待一段时间。

在flink-conf.yaml文件配置

# 设置重启策略为failure-rate
    restart-strategy: failure-rate
    
    # 失败作业之前的给定时间间隔内的最大重启次数，默认1
    restart-strategy.failure-rate.max-failures-per-interval: 3
    
    # 测量故障率的时间间隔。默认1min
    restart-strategy.failure-rate.failure-rate-interval: 5min
    
    # 两次连续重启尝试之间的延迟，默认akka.ask.timeout时间
    restart-strategy.failure-rate.delay: 10s

在代码中设置：

ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();
    
    // 3为最大失败次数；5min为测量的故障时间；10s为2次间的延迟时间
    env.setRestartStrategy(RestartStrategies.failureRateRestart(3,Time.of(5, TimeUnit.MINUTES),Time.of(10, TimeUnit.SECONDS)));

#### 3.无重启策略 ####

作业直接失败，不尝试重启。

在flink-conf.yaml中配置：

restart-strategy: none

在代码中实现：

ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment();
    env.setRestartStrategy(RestartStrategies.noRestart());

#### 4.后备重启策略 ####

使用群集定义的重新启动策略。这对于启用检查点的流式传输程序很有帮助。默认情况下，如果没有定义其他重启策略，则选择固定延迟重启策略。