测试积点老人 发表于 2023-11-8 09:18:40

Flink 的 checkpoint 机制对比 spark 有什么不同和优势?

回复可见
**** Hidden Message *****

kallinr 发表于 2023-11-9 09:06:38

都没用过

海海豚 发表于 2023-11-9 09:21:24

spark streaming 的 checkpoint 仅仅是针对 driver 的故障恢复做了数据 和元数据的 checkpoint。而 flink 的 checkpoint 机制 要复杂了很多,它采用的是 轻量级的分布式快照,实现了每个算子的快照,及流动中的数据的快照

qqq911 发表于 2023-11-9 10:14:54


spark streaming 的 checkpoint 仅仅是针对 driver 的故障恢复做了数据 和元数据的 checkpoint。而 flink 的 checkpoint 机制 要复杂了很多,它采用的是 轻量级的分布式快照,实现了每个算子的快照,及流动中的数据的快照

bellas 发表于 2023-11-9 10:31:55


spark streaming 的 checkpoint 仅仅是针对 driver 的故障恢复做了数据 和元数据的 checkpoint。而 flink 的 checkpoint 机制 要复杂了很多,它采用的是 轻量级的分布式快照,实现了每个算子的快照,及流动中的数据的快照

jingzizx 发表于 2023-11-9 10:39:25

spark streaming 的 checkpoint 仅仅是针对 driver 的故障恢复做了数据 和元数据的 checkpoint。而 flink 的 checkpoint 机制 要复杂了很多,它采用的是 轻量级的分布式快照,实现了每个算子的快照,及流动中的数据的快照
页: [1]
查看完整版本: Flink 的 checkpoint 机制对比 spark 有什么不同和优势?