Flink / Kafka 异常 - 6.Recovery is suppressed by FixedDelayRestartBackoffTimeStrategy 排查与修复

news/2024/6/16 5:30:18 标签: kafka, flink, FixedDelay, Restart

一.引言

使用 Flink - Kafka 接数据 Source 时程序报错:

org.apache.flink.runtime.JobException: Recovery is suppressed by FixedDelayRestartBackoffTimeStrategy

任务每次启动后持续10min左右,然后 RUNNING -> FAILED,如此重启失败了多次。

二.问题现象

1.任务 URL 界面

对应任务界面可以看到有一个 Source 的 3 个 Task 在任务启动的时间内一直处于 INITIALIZING 状态,直到任务结束。

2.yarn 界面

上述报错情况下 yarn 界面如下,任务重启后大约 7min 失败

三.问题分析与解决

1.Source 持续 INITIALIZING 与 周期性 Failed

查看异常栈日志:


http://www.niftyadmin.cn/n/1235725.html

相关文章

STM32F10x 学习笔记3(CRC计算单元)

STM32F 系列的单片机内部带了CRC32 计算单元。这个内置CRC模块的方法使用非常简单。其操作如下图所示。 图 1 CRC计算单元框图 归纳起来有如下几步操作:1. 开启CRC单元的时钟。RCC_AHBPeriphClockCmd(RCC_AHBPeriph_CRC, ENABLE)2. 复位CRC模块(设置CRC_CR0x01)&…

Spark 实战 - 3.一文搞懂 parquet

一.引用 parquet 文件常见于 Spark、Hive、Streamin、MapReduce 等大数据场景,通过列式存储和元数据存储的方式实现了高效的数据存储与检索,下面主要讲 parquet 文件在 spark 场景下的存储,读取与使用中可能遇到的坑。 二.Parquet 加载方式 …

九度搜索引擎点击优化_益阳网站排名_通过搜索引擎优化优劣势,总结关键词优化注意事项...

发布时间:2020-12-22 23:12:15目前,互联网发展迅速,各行各业都离不开互联网,它的发展便利了人们的生活。为了获得更多的市场和消费群体,企业纷纷将目光投向互联网。目前,搜索引擎是一个人人都在使用的搜索渠道&#xf…

stm32 PVD 可编程电压监测器

stm32 PVD 可编程电压监测器 作者:Changing发表时间:11-16 20:30分类:电子相关1 Comment 前一篇:单片机4*4矩阵键盘 当前是最后一篇 PVD (Programmable Votage Detector) ,即可编程电压监测器 。stm32库函数手册中没有细讲这个模块…

Spark - Task 与 Partition 一一对应与参数详解

一.引言 使用 spark 读取 parquet 文件,共有 M 个 parquet 文件,于是启动了 P Executor x Q Cores 进行如下 WordCount 代码测试,其中 P x Q M 即 Core 数目与 parquet 文件数一一对应: 其中每个 row 的 47 列对应的 parquet 文件名样例如下…

laravel auth(api)-attempt 返回false_Laravel 即时应用的一种实现方式

php中文网最新课程每日17点准时技术干货分享即时交互的应用在现代的 Web 应用中很多场景都需要运用到即时通讯,比如说最常见的支付回调,与三方登录。这些业务场景都基本需要遵循以下流程:● 客户端触发相关业务,并产生第三方应用的…

Excel VBA 基础知识——用代码读写目标单元格

从VBA角度来看Excel工作表,一个单元格区域可以是一个单独的单元格、一个行、一个列或者一系列单元格及其行、列。在使用VBA程序代码引用单元格区域时,Range对象可能是最常用的对象。这里就将向用户全面介绍如何利用Range对象来对目标单元格区域进行引用并…

毕业季·进击的技术er - 职场打工人

活动地址:毕业季进击的技术er 1.入行选择 👷 2.从事职业 📚 3.打工感受 🧱 4.快速成长 📈 5.给毕业生的话 🎓 1.入行选择 目前已经毕业三年,刚刚和单位续签,本科时期纠结于学自动化…