北京
三年前，WarpStream干了一件事：把Kafka的本地磁盤扔了，數據直接寫進S3。聽起來簡單，但成本砍到原來的十分之一。代價也很明顯——延遲從100毫秒飆到1-2秒。
當時很多人覺得這是妥協。但市場用腳投票：不是所有人都在乎那幾百毫秒，省下的運維麻煩和真金白銀更實在。于是跟風的來了。Aiven把這種架構送進了Apache Kafka開源主線，預計1-2年內落地。
2024年夏天，Databricks花大價錢收了Tabular——Apache Iceberg的創造者團隊，只有30人左右。數據湖格式（Iceberg、Delta Lake）和流數據的融合，成了新戰場。
現在Ursa進場。它通過"最小侵入式分叉"塞進Kafka，幾個月后開源。核心賣點就兩個：無盤主題（diskless topics）+ 原生集成Iceberg/Delta Lake。
成本賬很現實。傳統Kafka集群一年燒210萬到351萬美元，其中三分之二的生產流量跨可用區，復制流量必然跨區，消費端再占三分之二——除非開KIP-352。WarpStream模式把基礎設施成本打下來，但廠商要賺錢，"10倍省錢"是營銷話術，得細看。
延遲的trade-off擺在那兒：批量寫入省S3請求費，S3本身百毫秒級延遲，調優也壓不進1秒以下，否則成本優勢歸零。Ursa沒承諾打破這個物理限制，它賭的是"夠用的延遲+原生數據湖"這套組合拳。
當流數據不用二次ETL就能直接進湖，分析層和實時層的墻被拆了。這對已經押注Iceberg/Delta Lake的公司，是少一次數據搬運的誘惑。Kafka的下一個十年，可能真的不需要磁盤了。
特別聲明：以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布，本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
