刚入门 flink ,目前测试了单机部署,发现集群重启后,提交的任务都丢失了,想要恢复任务的话,需要手动指定 savepoint ,请问大佬们,flink 任务能持久化么,如果集群意外重启了,能否自动从 checkpoint 恢复任务呢。
是不是 flink 本身不支持这种功能,需要靠三方软件来实现呢
1
smartruid 5 天前
集群挂了没法自动恢复 job
|
2
liprais 5 天前
用 resource provider (k8s /yarn )都行,再加上 jobmanager ha,基本能扛住节点意外重启的问题
集群挂了老天爷来了也没用 |
3
jyq711 4 天前
蹲一个大佬
|
4
Curiosity777 OP @smartruid 只能一个个的手动恢复吗
|
5
Curiosity777 OP @liprais 主要是公司服务器经常搞迁移,但是不怕挂,停机迁移,很难受
|