DAWNING 乡 曙光 DAWNING 科拔计算未来 机群应用开发 并行编程原理及 程序设计 Parallel Programming: Fundamentals and Implementation 曙光信息产业有限公司 2021年1月 2021年1月 MP|并行程序设计 1/217
2021年1月 MPI并行程序设计 1/217 机群应用开发 并行编程原理及 程序设计 Parallel Programming: Fundamentals and Implementation 曙光信息产业有限公司 2021年1月
DAWNING 乡 曙光 DAWNING 科拔计算未来 MP并行程序设计 Parallel Programming with the Massage Passing Interface(MPl) 2021年1月 MP|并行程序设计 4/217
2021年1月 MPI并行程序设计 4/217 MPI并行程序设计 Parallel Programming with the Massage Passing Interface (MPI)
DAWNING 乡 曙光 DAWNING 并行编程标准 科拔计算未来 多线程库标准 Win 32 AP POSIX threads 编译制导标准 OpenMP-可移植共享存储并行编程标准. 消息传递库标准 本讨论的重 MPI PVM 2021年1月 MP|并行程序设计 5/217
2021年1月 MPI并行程序设计 5/217 • 多线程库标准 – – Win32 API. – – POSIX threads. • 编译制导标准 – – OpenMP – 可移植共享存储并行编程标准. • 消息传递库标准 – – MPI – – PVM 并行编程标准 本讨论的重点
DAWNING 乡 曙光 DAWNING 消息传递并行程序设计 科拔计算未来 消息传递并行程序设计 一指用户必须通过显式地发送和接收消息来实现处理机间的数据交 换 一在这种并行编程中,每个并行进程均有自己独立的地址空间,相 互之间访问不能直接进行,必须通过显式的消息传递来实现。 这种编程方式是大规模并行处理机(MPP)和机群( Cluster)采 用的主要编程方式。 ·并行计算粒度大,特别适合于大规模可扩展并行算法 由于消息传递程序设计要求用户很好地分解问题组织不同进程间 的数据交换,并行计算粒度大,特别适合于大规模可扩展并行算法. ·消息传递是当前并行计算领域的一个非常重要的并行程序 设计方式 2021年1月 MP|并行程序设计 6/217
2021年1月 MPI并行程序设计 6/217 消息传递并行程序设计 • 消息传递并行程序设计 – 指用户必须通过显式地发送和接收消息来实现处理机间的数据交 换。 – 在这种并行编程中,每个并行进程均有自己独立的地址空间,相 互之间访问不能直接进行,必须通过显式的消息传递来实现。 – 这种编程方式是大规模并行处理机(MPP)和机群(Cluster)采 用的主要编程方式。 • 并行计算粒度大,特别适合于大规模可扩展并行算法 – 由于消息传递程序设计要求用户很好地分解问题,组织不同进程间 的数据交换,并行计算粒度大,特别适合于大规模可扩展并行算法. • 消息传递是当前并行计算领域的一个非常重要的并行程序 设计方式
DAWNING 乡 曙光 DAWNING 什么是MP? 科拔计算未来 Massage Passing Interface:是消息传递函数库的 标准规范,由MP论坛开发,支持 Fortran和C 一种新的库描述,不是一种语言。共有上百个函数调 用接口,在 Fortran和C语言中可以直接对这些函数进行 调用 MP|是一种标准或规范的代表,而不是特指某一个对它 的具体实现 MPl是一种消息传递编程模型,并成为这种编程模型的 代表和事实上的标准 2021年1月 MP|并行程序设计 7/217
2021年1月 MPI并行程序设计 7/217 什么是MPI? • Massage Passing Interface:是消息传递函数库的 标准规范,由MPI论坛开发,支持Fortran和C – 一种新的库描述,不是一种语言。共有上百个函数调 用接口,在Fortran和C语言中可以直接对这些函数进行 调用 – MPI是一种标准或规范的代表,而不是特指某一个对它 的具体实现 – MPI是一种消息传递编程模型,并成为这种编程模型的 代表和事实上的标准