Учебное пособие представляет краткое введение в проблематику параллельного программирования для параллельных систем различных классов. В него включены краткие сведения об архитектурах многопроцессорных систем, рассмотрены понятия и виды параллелизма, изложена технология параллельного программирования OpenMP для систем с общей памятью, а также подробно описан интерфейс передачи сообщений MPI.
Материал глав, содержащих описание конкретных технологий параллельного программирования, сопровождается контрольными вопросами. Это и многое другое вы найдете в книге Параллельное программирование на основе технологий openmp, mpi, cuda. Учебное пособие (А. А. Малявко)