Apache Flink

Apache Kafka

分布式消息流平台，用于系统之间高吞吐的数据传递，适合搭建事件驱动的业务链路并解耦上下游服务。

Apache Pulsar

云原生的消息中间件，支持多租户与分层存储，适合大规模消息场景的架构设计、跨集群的数据同步需求。

Redpanda

兼容常见消息协议的流数据平台，单机即可承载较高吞吐，适合做实时数据接入与事件分发的团队。

Airbyte

开源的数据集成平台，用连接器把各系统数据同步到仓库，搭建数据管道时能少掉大量手工导数的工作。

Apache Airflow

编排定时任务的工作流平台，用代码描述依赖关系，可调度每日数据加工、报表生成与跨系统批处理任务。

Canal

订阅数据库变更的同步工具，可把增量写入消息队列，常用于缓存刷新、搜索索引更新与跨库数据同步。