介本书是针对“并行程序设计”“并行计算”等课程编写的教材，内容包括并行计算基础知识、共享内存系统的OpenMP和Pthreads多线程编程、消息传递系统的MPI编程、Slurm作业管理系统、GPU等异构系统的CUDA/OpenCL/OpenACC/Athread编程、常用的并行设计与性能优化方法、典型并行应用算法等，另外，还特别增加了针对我国自主研发的申威处理器编程的相关内容。本书涵盖并行程序设计最常用的编程语言/接口、设计与性能优化方法、基础应用算法等内容，一方面反映了OpenMP、MPI等成熟编程语言/接口的新特性，以及GPU异构编程等新型编程接口；另一方面在典型并行应用算法部分尝试用计算机专业人员易于理解的方式介绍典型算法，特别是以线性方程组迭代求解方法中的共轭梯度法为例。本书每章都设置了以编程为主的习题，鼓励读者通过编写程序掌握相关方法。本书适合作为计算机和信息类专业高年级本科生和研究生的教材，也可供高性能计算和并行计算领域的科研人员参考。

\t第1章 并行程序设计概述



\t11并行性概述



\t1.2如何衡量计算速度



\t1.3并行计算系统基本知识



\t1.3.1弗林分类



\t1.3.2共享内存系统与消息传递系统



\t1.3.3几种常见的并行计算系统



\t1.3.4互连网络



\t1.3.5多级存储体系结构



\t1.4并行编程语言/接口分类



\t1.5浮点数格式



\t1.6例子程序



\t1.6.1矩阵相乘



\t1.6.2规约和扫描



\t1.7小结



\t习题



\t第2章 共享内存系统并行编程



\t2.1共享内存系统中的并行模型



\t2.1.1多线程并行概述



\t2.1.2同步与互斥的概念



\t2.2OpenMP编程



\t2.2.1概述



\t2.2.2OpenMP的基本命令



\t……