跳到正文
Databricks Blog·· 6 小时前AI 评分38

Apache Spark 与 Apache Flink:你应该用哪个?

Apache Spark vs Apache Flink: which should you use?

AI 导读

Databricks 认为,对大多数团队来说 Apache Spark 是更好的默认选择,因为 Real-Time Mode 将 Spark 流处理带到毫秒级端到端延迟,并消除了团队引入 Flink 的主要原因。在 Databricks 公布的每秒 10,000 条记录的基准测试中,Spark Real-Time Mode 在无状态工作上与 Flink 持平(p99 为 3 ms),并在有状态聚合(14 ms 对 45 ms)和流-静态连接(9 ms 对 95 ms)上胜出。Flink 仍适合超大规模键控状态、复杂事件处理和事件时间定时器,但采用它通常意味着要在 Spark 之外再运维一个引擎。

来源:Databricks Blog · databricks.com