AI/大数据 X K8s：Cloud Native Days China武汉站圆满落幕

Posted 2021-04-24 容器魔方

7月27日，由CNCF携手华为云联合主办的Cloud Native Days China在武汉·斗转科技园举办了首个AI&大数据专场。短短4个小时的交流会议，邀请了5位技术达人带来精彩分享，吸引了上百名云原生技术爱好者现场参会，近千名观众线上直播平台观看。

来自华为云、百度、斗鱼、海云基因的资深讲师带来关于智能推荐平台架构、Kubernetes资源调度、云计算在基因大数据的实践等深度内容剖析，为云原生爱好者们带来AI&大数据的经验分享。

AI与大数据相辅相成

AI智能与大数据技术可谓相辅相成。一方面，大数据技术的发展使AI摆脱了数据的桎梏，可以在充足的样本基础上提升模型的能力，各领域AI模型的研发绝大多数都离不开大数据技术的支持；另一方面，对于利用大数据技术收集到的数据需要通过一些智能分析过程才能发现其中的价值，通过对已有数据的智能分析，可以推导出更多的数据特征，甚至进一步指导数据生产的方向。所以谈起对大数据的利用，都不可避免地涉及到AI的概念。

斗鱼资深讲师张龙表示，斗鱼个性推荐平台上线至今也几经演变，在业务中面临的直播间分类、弹幕偏好、马太效应等问题，从数据仓库切入，结合数据质量形成知识图谱，预测用户属性，探索出了一条斗鱼个性推荐平台自学习的新思路。

同样与大数据打交道的海云基因，则通过大数据技术实现了“精准医疗数字化整体解决方案”。海云基因CTO曹春笋介绍道基因组学数据是天然的大数据，计算分析的价值超过测序本身，基因数据具有分析流程复杂、数据存储困难的特点，通过该解决方案可以通过简单的人机交互，实现一键完成生信分析。

来自百度的“飞桨”则是专注于AI的开源平台，经过百度不断打磨，在中文自然语言处理算法模型、大规模分布式并行训练、一体化推理引擎等方面提供领先于国外平台的技术能力(详见讲师PPT)。

Kubernetes 赋能AI&大数据

而提到AI和大数据，容器技术的支持也至关重要。

Kubernetes调度是作为平台核心能力之一，在持续演进中，引入了亲和性、Pod优先级等高级能力，大幅提升性能，并启动了scheduler framework计划来重点优化可扩展性。华为云原生开源负责人Kevin.Wang从调度框架和代码实现角度详细讲解了Kubernetes调度的原理，并从Kubernetes项目Maintainer的角度预演了Kubernetes社区资源调度的后续发展方向。

Volcano是K8s社区中专注于批量计算的开源平台，华为云高级工程师hzxuzhonghu介绍道，针对人工智能和大数据作业场景，原生K8S的支持度不高，华为云基于K8s不断探索和实践，开源了下一代批量计算平台Volcano。目前Volcano提供在Kubernetes上运行AI、DL工作负载所需要的如公平调度，GPU拓扑感知，队列管理、作业管理（暂停/恢复）等高级功能。

精彩继续， 下一站已来

作为Cloud Native Days China首个AI&大数据专场，武汉站的现场听众们热情高涨，提问环节积极举手，茶歇时刻也抓紧机会与讲师交流。那么下一站南京将呈现哪个专场，邀请哪位技术大拿前来分享？敬请期待！

PPT请复制链接下载或点击阅读原文：

https://bbs.huaweicloud.com/forum/forum.php?mod=viewthread&tid=10665&page=1&extra=#pid33622

现场讲师分享精华回放：

http://m.itdks.com/#/Technicaltopic?aid=3073

云原生服务网格

Istio

华为云原生团队编写的《云原生服务网格Istio》，已经上架京东图书预售。本书分为原理篇、实践篇、架构篇和源码篇，由浅入深地将Istio项目庖丁解牛并呈现给读者。

无论是对于刚入门Istio的读者，还是对于已经在产品中使用Istio的读者，本书都极具参考价值，详情请识别下方二维码或点击文末阅读原文。

点击下方阅读原文，下载讲师PPT