走进并行时代(序)

Posted 2021-05-17 threepigs

     接触并行计算已经有一阵子了，最初的兴趣始于对GPU的好奇，G80这个NV为了GPU的
通用化走向的第一步，也慢慢揭开了以后GPU的一种趋势：多核通用化。不管以后是
CPU取代GPU，或者两者和谐共处，多核计算是不可阻挡的趋势。
    传统的单核体系结构的研究已经沉寂很久了，单核技术需要一种革命性的突破才能打
破这种沉寂。不管是学术界，还是工业界都热衷于在多核技术上，往一个die里面使劲的
塞U，当然比改进每个U的能力要来得方便。多核，并行时代的出现，挑战也必然随之而来
    挑战来自软硬两方面。硬件方面，多个核的拓扑结构的设计，核间互连技术，以及核
间的通信，Cache一致性等。软件方面，目前的编程模式都是基于串行的，要写出高效的
并行算法，对程序员的要求也比较高，所以设计一种高效的并行编程模型也是目前研究的
一个热点，比如Google的MapReduce，MIT的Cilk等，除了改进编程模型来写高效的
并行算法外，另一种途径就是通过编译器来做并行化，比如OpenMP等；另外就是多线程导
致的一个永恒的问题，共享变量的互斥访问，操作的原子性问题，Lock-free技术应运而
生，Transaction Memory就是其中的代表。
    在毕业之际，特地把并行计算的学习整理成笔记，以供日后参考。暂定目录如下

    目录:

    第一章  硬件体系结构的研究热点
            第一节 多核体系结构相关
            第二节 GPU硬件相关

    第二章  并行编程模型研究

    第三章  编译器相关研究