并行和分布式系统

Posted 麒思妙想

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了并行和分布式系统相关的知识,希望对你有一定的参考价值。

今天分享一个课程,别走,不是知识付费的那种,请放心食用。

分享的是2020年剑桥大学《并发和分布式系统》课程的《分布式系统》部分,课程内容是比较基础的,也是比较经典的。

授课Martin Kleppmann是DDIA《数据密集型应用系统设计》的作者。DDIA豆瓣评分高达9.7的神书。

课程首页:

https://www.cl.cam.ac.uk/teaching/2021/ConcDisSys/materials.html

视频地址:

https://www.youtube.com/playlist?list=PLeKd45zvjcDFUEv_ohr_HdUFe97RItdiB

以上是关于并行和分布式系统的主要内容,如果未能解决你的问题,请参考以下文章

数据与模型并行

并行化的世界--分布式硬件和分布式操作系统

分布式机器学习系统笔记——模型并行,数据并行,参数平均,ASGD

分布式机器学习系统笔记——模型并行,数据并行,参数平均,ASGD

分布式机器学习系统笔记——模型并行,数据并行,参数平均,ASGD

分布式机器学习——模型并行训练