Windows和Linux系统下并行计算环境MPI和OpenMP的搭建

Posted ほしづきよ

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Windows和Linux系统下并行计算环境MPI和OpenMP的搭建相关的知识,希望对你有一定的参考价值。

windows平台下在Visual Studio2019配置MPI环境

MPI下载安装

MPI windows版本的下载地址:https://docs.microsoft.com/en-us/message-passing-interface/microsoft-mpi?redirectedfrom=MSDN
然后点击这里下载:

图中两个文件都要选择,下载。

下载完成后,点击这两个文件,都需要进行安装。

项目配置

尝试了一下,貌似使用VS配置MPI环境,创建的项目要是Windows桌面向导,其他的项目类型试了会出错误。
右击项目->属性,进行配置:

  • 右上角->配置管理器->活动解决方案平台,选择:x64;

  • VC++目录->包含目录,添加:“C:\\Program Files %28x86%29\\Microsoft SDKs\\MPI\\Include;”

  • VC++目录->库目录,添加:“C:\\Program Files %28x86%29\\Microsoft SDKs\\MPI\\Lib\\x64;”

  • C/C++ -> 预处理器->预处理器定义,添加:“MPICH_SKIP_MPICXX;”

  • C/C++ -> 代码生成 -> 运行库,选择:多线程调试(/MTd);

  • 链接器 -> 输入 -> 附加依赖项,添加:“msmpi.lib;”
    至此,环境就配好了,接下来就可以开始编程了。

测试

项目源文件下,新建.cpp文件,写入以下代码:

#include<stdio.h>
#include<mpi.h>

int main(int argc, char* argv[]) {
	int myid, numprocs;
 
	MPI_Init(&argc, &argv);
	MPI_Comm_rank(MPI_COMM_WORLD, &myid);
	MPI_Comm_size(MPI_COMM_WORLD, &numprocs);
 
	printf("%d Hello world from process %d \\n", numprocs, myid);
 
	MPI_Finalize();
	
	return 0;
}

让我们来分析一下上面的代码:
对于SPMD编程,程序员必须知道(1)进程编号,(2)多少个进程,(3)进程通信
那么MPI久提供了下列函数来回答这些问题:

  • 用MPI_Comm_size 获得进程个数p:
    int MPI_Comm_size(MPI_Comm comm, int *size)
  • 用MPI_Comm_rank 获得进程的一个叫rank的值,该rank值为0到p-1间的整数,相当于进程的ID
    int MPI_Comm_rank(MPI_Comm comm, int *rank)
  • 通信组/通信子: MPI_COMM_WORLD
    一个通信组是一个进程组的集合。所有参与并行计算的进程可以组合为一个或多个通信组。
    执行MPI_Init后,一个MPI程序的所有进程形成一个缺省的组,这个组被写作MPI_COMM_WORLD
    该参数是MPI通信操作函数中必不可少的参数,用于限定参加通信的进程的范围

下面我们来运行一下,看看结果:
在控制台该项目(这里的项目名称mpi_test)下的x64/Debug文件目录下打开cmd命令行窗口(Shift+鼠标左键,选择\'在此处打开Powershell窗口\',输入start cmd),输入mpiexec -n 10 test.exe。
运行结果如下图:

Linux下配置MPI编程环境-Ubuntu 18.04

终端配置过程

  • 在终端上先找到文件所在位置:sudo tar -zxvf mpich-3.3.2.tar.gz

  • 解压完毕,使用ls命令查看便可发现多出了一个mpich-3.3.2目录, 然后进入该目录:cd mpich-3.3.2
    使用ls查看,会发现其中有configure这个文件。

  • 运行命令./configure -prefix=/usr/local/mpich进行软件配置与检查,这里我们只设置安装目录即可。注:prefix参数是表示安装路径。
    可能会报错error: no acceptable C compiler found in $PATH
    要先使用命令sudo apt-get install build-essential安装好需要的编译器
    -configure成功后就开始进行编译和安装了,使用make 2>&1|tee m.txt,进行编译,将错误重定向写入到m.txt中,如下图所示:

    之后就是漫长的等待-_-||,这个速度我甚至一度怀疑是不是我的操作有问题 ̄へ ̄

  • 使用make install进行安装,如下图所示。

  • 配置环境变量sudo vim /etc/profile
    在文件中添加以下内容:

#set MPI path
MPI_HOME=/home/thyme/mpich-install/bin 
PATH=${PATH}:${MPI_HOME}
export MPI_HOME

其中MPI_HOME后的路径是mpich安装的路径,这里大家要根据自己的情况进行修改的。

  • 测试配置是否成功,如果像下图这样,就说明已经配置成功了。

    不得不吐槽,Ubuntu下配置MPI编程环境真是耗时耗力,中间make编译时,频繁出错,我差点想砸电脑放弃了QAQ。
    然而安装成功,才卖出了一小步,我们接下来还要开启一个虚拟机,在另一个虚拟机上执行以上同样的步骤,至此才搭建了一个最小的集群系统,才能进行并行计算。
    如果只是一般的编程,还是建议大家直接在windows系统下配置,用vs对每次建立的新项目配置一下。

Windows系统下OpenMP配置

visual studio2019配置

项目属性 --> C/C++ --> 语言 --> OpenMP支持,下拉菜单选择“是(/openmp)”,同时要将符合模式设置成“否”,否则编译会报错,如下图所示:

测试

在使用具体实例测试之前,我们先来测试一下自己的计算机是几核的。

#include<omp.h>
#include<iostream>
int main()
{
    std::cout << "parallel begin:\\n";
    #pragma omp parallel
    {
        std::cout << omp_get_thread_num();
    }
    std::cout << "\\n parallel end.\\n";
    std::cin.get();
    return 0;
}


这是我的运行结果,所以说明处理器是8核的。

OpenMP中使用parallel指令标识代码中的并行段:

#pragma omp parallel
 
{
 
      多核并行执行的代码;
 
}

当编译器发现#pragma omp parallel for后,自动将下面的for循环分成N份,(N为电脑CPU核数),然后把每份指派给一个核去执行,而且多个核之间为并行执行。
下面是一个小实例:

#include <iostream>
int main()
{
#pragma omp parallel for
    for (int i=0;i<10;i++)
        std::cout<<i<<std::endl;
    return 0;
}

控制台输出:

运行结果:

以上是关于Windows和Linux系统下并行计算环境MPI和OpenMP的搭建的主要内容,如果未能解决你的问题,请参考以下文章

MPI多机器实现并行计算

MPI集群配置

windows怎么配置安装mpi

源代码搭建应用——动手搭建自己的计算集群系统

请问fluent15.0如何打开单机并行计算,Intel MPI

小烨收藏MPI和Hadoop的区别