数据处理

Apache Airflow

工作流调度与编排系统

Azkaban

分布式工作流管理器

Apache Beam

统一批流处理模型

Apache Flink

分布式流批一体计算引擎

AWS Glue

全托管ETL服务

Apache Kafka

分布式流数据平台

Apache Oozie

Hadoop工作流调度系统

Presto

分布式SQL查询引擎

Apache Spark

通用大数据计算引擎