“AI+大数据”新模式下，爱奇艺是如何打造基于大数据的深度学习平台的？| AICon

Posted 2021-04-19 AI前线

爱奇艺从 2010 年开始开展大数据业务，相继上线了离线计算、实时计算、传统机器学习等多种计算框架来满足海量的数据处理和分析需求。近几年，随着 AI 应用的兴起，越来越多的业务利用深度学习等技术从历史积累的大数据中挖掘更大的数据价值。

那如何利用现有的大数据基础设施，更好地促进 AI 应用？爱奇艺进行了大数据与深度学习技术相结合的探索，打造基于大数据的深度学习平台。本次 AICon 上海 2020 邀请到了爱奇艺大数据服务负责人梁建煌进行打造中遇到的一些坑和实践经验分享，希望可以给大家带来一些启发。

内容大纲

1. 爱奇艺大数据介绍

• 爱奇艺大数据服务体系介绍

• 爱奇艺大数据计算框架演进：离线计算、实时计算及对应的数据分析场景

2. 爱奇艺大数据 AI 应用

• AI 应用业务介绍

• 基于 Python、Spark MLlib 的离线机器学习

• 引入 TensorFlow、PyTorch 等框架助力深度学习及优化经验

• 在线学习

3. 爱奇艺大数据深度学习平台建设

• 大数据和深度学习结合的工作流调度

• 开发部署一体化流程：数据管理、模型训练、推理部署、AB 测试效果

• 其他功能介绍：调参助手和模型分析

4. 未来展望

听众受益

1. 了解大数据计算服务体系和爱奇艺 AI 应用实例；

2. 了解大数据场景下深度学习的落地、优化经验和平台化建设实践。

除了大数据计算，AICon 上海站还设置有 NLP、推荐广告技术及应用、AI 工程师团队建设与管理、认知智能、智能金融、智能语音前沿技术等热门专场，来自 BAT、微软、小米、华为、PayPal、快手等 50+ 一线 AI 技术大咖将带来更多精彩分享，目前大会限时 5 折起报名火热进行中，点击 阅读原文了解 更多，有问题欢迎咨询票务小姐姐 Amy：18514549229（同微信），我们 8 月上海不见不散！