64
Stream 分布式数据流的轻量级异步快照 | SmartSi
source link: http://smartsi.club/2018/03/06/lightweight-asynchronous-snapshots-for-distributed-dataflows/?
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
1. 概述分布式有状态流处理支持在云中部署和执行大规模连续计算，主要针对低延迟和高吞吐量。这种模式的一个最根本的挑战就是在可能的失败情况下提供处理保证。现有方法依赖于可用于故障恢复的周期性全局状态快照。这些方法有两个主要缺点。首先，他们经常拖延影响数据摄取的整体计算过程。其次，持久化存储所有传输中的记录以及算子状态，这会导致比所需的快照要更大。 因此，提出了一种新的分布式快照的算法，即在 Apac
Recommend
About Joyk
Aggregate valuable and interesting links.
Joyk means Joy of geeK