首页/数据/数仓建模速查/Flink:流批一体的实时计算引擎
湖仓与引擎63 条

Flink:流批一体的实时计算引擎

Flink 以事件时间和状态为核心,天然支持流处理与批处理;实时数仓中承担 CDC 入湖、实时 ETL 与实时指标计算。

数仓建模速查数据更新于 2026-10-12
定位流批一体
核心事件时间+状态
场景实时数仓/CDC/告警
部署YARN/K8s/Standalone

提交实时作业

提交实时作业
flink run -d -p 8 \
  -c com.demo.TradeOrderJob \
  /opt/jobs/trade-order-job.jar \
  --kafka.bootstrap broker:9092 \
  --checkpoint.interval 60000
实时作业的并行度与 Kafka 分区数对齐,避免部分分区消费成为瓶颈。

易错点

  • 并行度与 Kafka 分区数不匹配,吞吐受限

数据来源与参考

  • Apache Flink 官方文档:Flink Architecture
​‌‌​​‌​​​‌‌​‌‌‌‌​‌‌​​​‌‌​‌‌‌​​‌‌​​‌​‌‌‌​​‌‌‌​​​‌​‌‌​‌​​‌​‌‌‌​​​‌​‌‌​‌​​‌​‌‌​​​‌‌​‌‌‌​‌​​​‌‌​‌‌‌‌​​‌​‌‌‌​​‌‌​​​‌‌​‌‌​‌‌‌‌​‌‌​‌‌​‌