双十一剑指Spark两个生产场景
Posted 若泽大数据
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了双十一剑指Spark两个生产场景相关的知识,希望对你有一定的参考价值。
扫码,拼团
只限活动2天!!!
课程内容:
场景一:数据平台中如何使用Spark封装SQL作业
1) 方案设计
2) 如何提升作业运行中的并行执行
3) 如何保证数据重跑的幂等性
4) 作业运行的关键指标采集
上课: 2020-11-11 21:00
场景二:Spark Streaming完成双流join
1) 方案设计
2) 使用maxwell实时采集mysql数据
3) 双流join的实现
4) 流处理过程中延迟数据如何解决
上课: 2020-11-12 21:00
上课方式: 使用购买账号登录腾讯课堂,打开URL
https://ke.qq.com/course/3067615(阅读原文) 或者搜索 “剑指Spark”
以上是关于双十一剑指Spark两个生产场景的主要内容,如果未能解决你的问题,请参考以下文章
StructredStreaming+Kafka+Mysql(Spark实时计算| 天猫双十一实时报表分析)