请教关于 flink 任务的问题

5 天前
 Curiosity777
  1. 刚入门 flink ,目前测试了单机部署,发现集群重启后,提交的任务都丢失了,想要恢复任务的话,需要手动指定 savepoint ,请问大佬们,flink 任务能持久化么,如果集群意外重启了,能否自动从 checkpoint 恢复任务呢。

  2. 是不是 flink 本身不支持这种功能,需要靠三方软件来实现呢

587 次点击
所在节点    Java
5 条回复
smartruid
5 天前
集群挂了没法自动恢复 job
liprais
5 天前
用 resource provider (k8s /yarn )都行,再加上 jobmanager ha,基本能扛住节点意外重启的问题
集群挂了老天爷来了也没用
jyq711
4 天前
蹲一个大佬
Curiosity777
2 天前
@smartruid 只能一个个的手动恢复吗
Curiosity777
2 天前
@liprais 主要是公司服务器经常搞迁移,但是不怕挂,停机迁移,很难受

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://tanronggui.xyz/t/1105908

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX