Flink从入门到精通100篇(二十三)-Apache Flink在滴滴的应用与实践

Posted 文宇肃然

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Flink从入门到精通100篇(二十三)-Apache Flink在滴滴的应用与实践相关的知识,希望对你有一定的参考价值。

前言

Apache Flink 是一个分布式大数据处理引擎,可对有限数据流和无限数据流进行有状态计算。可部署在各种集群环境,对各种大小的数据规模进行快速计算。

滴滴基于 Apache Flink 做了大量的优化,也增加了更多的功能,比如扩展 DDL、内置消息格式解析、扩展 UDX 等,使得 Flink 能够在滴滴的业务场景中发挥更大的作用。

主要内容包括:

  • 服务化概述

  • StreamSQL 实践

  • 平台化建设

  • 挑战及规则

1. 滴滴大数据服务架构

滴滴基于开源的生态构建了比较完整的大数据体系,包括离线、实时系统

以上是关于Flink从入门到精通100篇(二十三)-Apache Flink在滴滴的应用与实践的主要内容,如果未能解决你的问题,请参考以下文章

Flink从入门到精通100篇(二十三)-基于Apache Flink的爱奇艺实时计算平台建设实践

Flink从入门到精通100篇(二十一)-万字长文详解 Flink 中的 CopyOnWriteStateTable

Flink从入门到精通100篇(二十四)-对Flink SQL Client 源码做深度解析

Flink从入门到精通100篇(二十二)-Apache Flink OLAP引擎性能优化及应用

Flink从入门到精通100篇(二十一)-Apache Flink 与 Apache Hive 的集成

Flink从入门到精通100篇(二十)-跨境电商 Shopee 的实时数仓之路