Flink 2.0 状态管理存算分离架构演进

摘要：本文整理自阿里云智能 Flink 存储引擎团队负责人梅源在 Flink Forward Asia 2023 的分享，梅源结合阿里内部的实践，分享了状态管理的演进和 Flink 2.0 存算分离架构的选型。内容主要分为以下五部分：1. 引言2. 为什么状态对 Flink 如此重要3. 状态存储提升 —— 社区和商业版状态存储4. 状态管理存算分离架构 —— 架构演进和挑战5. 总结Tips：点击「阅读原文」在线观看 FFA 2023 会后资料～01引言我们在这个时间点重新聊状态存储这个话题是因为状态存储是流计算的核心。Flink 从 2017 年 VLDB 发表奠基之作介绍状态存储[1] 发展至今，Flink 在状态这部分的架构基本并没有太大的变化。但时代是在不断演进和变化的，无论部署模式、存储模式，还是作业负载，都已经发生了翻天覆地的变化。从部署模式看，我们经历了 map-reduce 时代 Cluster 上没有资源隔离的 ………………………………