流处理系统正确性基石：ExactlyOnce的设计和实现

按：ETL是目前比较典型的应用，应用面比较广，Exact-Once是其中的重要特性，但是实现起来并不容易。这篇文章是我的朋友Tenyu和朋友所写，以Prevega为例，详细介绍了Exact-Once的原理和实现细节，希望能为感兴趣的朋友提供帮助。Tenyu长期专注于分布式存储领域，目前就职于DellEMC。作者 | 滕昱、周煜敏、赵凯皓编辑 | VincentAI 前线导读：所谓的流式处理其实就是对 Stream 的读取 - 处理 - 写入（ETL）操作，应用从 Stream 中读取数据，再对数据进行相应的处理分析，最后将结果写入另一个 Stream 中。其中仅一次语义保证了哪怕系统发生故障，每一个 ETL 操作也仅会被执行一次，不会产生数据的丢失或者重复。这样的可靠性保证对于一些交易、金融类的应用来说至关重要，这就需要 ………………………………