Skip to content

Latest commit

 

History

History
31 lines (23 loc) · 1.02 KB

File metadata and controls

31 lines (23 loc) · 1.02 KB

Streaming SQL Sink 文档

本目录聚焦 Streaming SQL 的下游写出能力(Sink)。

支持矩阵

| Connector | 支持格式 |

|---|---| | kafka | json / raw_string / raw_bytes(沿用 Kafka Sink 编码能力) | | filesystem | csv / parquet / json(JSONL) / avro / orc | | s3 | csv / parquet | | delta | csv / parquet / json(JSONL) / avro / orc | | iceberg | csv / parquet | | lanceDB | lance |

文档列表

通用约定

  • CREATE STREAMING TABLE ... WITH (...) AS SELECT ... 中通过 WITH 指定 connectorformat
  • Sink 场景建议显式指定 type='sink'
  • lanceDB connector 允许 format='lance';其余 Sink connector 不支持 lance
  • format='json' 的文件类 Sink 输出为 JSON Lines(NDJSON,.jsonl)。