双十一剑指Spark两个生产场景

Posted 若泽大数据

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了双十一剑指Spark两个生产场景相关的知识,希望对你有一定的参考价值。

扫码,拼团

只限活动2天!!!

课程内容: 
场景一:数据平台中如何使用Spark封装SQL作业 
1) 方案设计  
2) 如何提升作业运行中的并行执行 
3) 如何保证数据重跑的幂等性 
4) 作业运行的关键指标采集 

上课: 2020-11-11 21:00

场景二:Spark Streaming完成双流join 
1) 方案设计 
2) 使用maxwell实时采集mysql数据 
3) 双流join的实现 
4) 流处理过程中延迟数据如何解决

上课: 2020-11-12 21:00


上课方式: 使用购买账号登录腾讯课堂,打开URL

https://ke.qq.com/course/3067615(阅读原文) 或者搜索 “剑指Spark”











以上是关于双十一剑指Spark两个生产场景的主要内容,如果未能解决你的问题,请参考以下文章

StructredStreaming+Kafka+Mysql(Spark实时计算| 天猫双十一实时报表分析)

双十一高并发场景背后的数据库RDS技术揭秘

全网详解从0到1搭建双十一实时交易数据展示平台——Spark+Kafka构建实时分析系统

双十一云起实验室体验专场,七大场景,体验有礼

Flink史上最简单双十一实时分析案例

双十一 手淘技术用了这几招