dataworks支持哪些实时计算引擎？-[阿里云_云淘科技]

匿名 • 2023年12月31日上午8:34 • 阿里云

dataworks支持哪些实时计算引擎？

以下为热心网友提供的参考意见

阿里云DataWorks支持的实时计算引擎包括：

Flink实时计算：基于开源项目Apache Flink，提供低延迟、高吞吐量的流式数据处理能力。
Blink（StreamCompute）：阿里巴巴集团自研的大规模实时计算引擎，兼容Apache Flink API，并在性能和易用性上做了优化。

以下为热心网友提供的参考意见

DataWorks支持绑定E-MapReduce引擎的实时计算任务。同时，它还提供了基于阿里巴巴实时计算引擎Flink的一站式流计算开发平台Stream Studio。该平台支持可视化拖拽DAG和SQL两种开发模式，并且能够实现DAG与SQL互相转换，使得用户可以通过直观的操作来构建流计算作业。

此外，阿里云DataWorks还以All in one box的方式提供Serverless化服务，基于阿里云MaxCompute、Flink作为核心计算引擎，涵盖了数据集成、数据开发（实时离线任务一体化开发、实时离线异构数据湖查询）、算法开发、数据服务、数据治理、数据应用等各方面能力。这种全链路的能力方便用户在云端构建出符合自身需求的数据智能解决方案。

以下为热心网友提供的参考意见

阿里云DataWorks支持多种实时计算引擎，其中包括：

实时计算 Flink版：
- 提供基于Apache Flink的实时计算服务，支持SQL和API方式开发实时处理任务，能够进行实时数据清洗、分析、同步以及流批一体的混合计算。
Blink（内部可能称为Flink SQL）：
- 阿里巴巴对Apache Flink进行了深度优化后的实时计算引擎，同样支持SQL来进行实时数据处理。
其他潜在支持的实时计算框架：
- 虽然没有明确列出所有实时计算引擎，但根据阿里巴巴在大数据领域的布局和技术积累，有可能还支持如Storm、Spark Streaming等其他开源或自研的实时计算框架。