跳到正文
实时
热点事件历史事件

Spark 实时模式正式可用并支持有状态处理

2 篇报道1 个报道来源14 天前更新

先了解这件事

AI 综述

Databricks宣布Spark Declarative Pipelines的Real-Time Mode正式可用,称该模式通过持续流式处理、并行查询阶段和即时数据传递实现毫秒级端到端延迟。 随后发布的Apache Spark 4.3已在Databricks Runtime 19中可用,Real-Time Mode在该版本新增有状态处理,支持流式聚合、dropDuplicates和transformWithState。Databricks称,在三项代表性有状态基准测试中,端到端延迟达到P99低于150毫秒。

AI 根据报道生成 · 更新于 13 天前

事件进展

2 个进展

  1. 11月5日 08:00 · 1 篇报道
    Introducing Apache Spark® 4.3
    Databricks Blog:Apache Spark 4.3 发布,Databricks Runtime 19 已可用
  2. 10月30日 06:30 · 1 篇报道
    Spark Declarative 实时模式正式可用
    Databricks Blog:Databricks 宣布 Spark Declarative Pipelines Real-Time Mode 正式可用

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. Databricks Blog精选
    Apache Spark 4.3 发布,Databricks Runtime 19 已可用

    Apache Spark 4.3 发布并在 Databricks Runtime 19 中可用,Real-Time Mode 新增有状态处理,支持流式聚合、dropDuplicates 和 transformWithState。

10月30日
  1. Databricks Blog
    Databricks 宣布 Spark Declarative Pipelines Real-Time Mode 正式可用

    Databricks 宣布 Spark Declarative Pipelines Real-Time Mode 正式可用,该模式通过持续流式处理、并行查询阶段和即时数据传递实现毫秒级端到端延迟。