В чем преимущества и недостатки распределенной памяти в параллельных вычислениях?

Преимущества распределённой памяти в параллельных вычислениях:

• Масштабируемость. scilead.ru Можно наращивать производительность путём добавления процессоров. kpfu.ru
• Уменьшение задержки обращения к локальной памяти из-за отсутствия конфликтов при доступе к ней. edu.tsu.ru
• Повышение пропускной способности, так как все операции обращения к памяти могут выполняться параллельно. edu.tsu.ru

Недостатки распределённой памяти:

• Большие накладные расходы на межпроцессорное взаимодействие. kpfu.ru Для обмена данными используются механизмы передачи сообщений, что может создавать дополнительные задержки. scilead.ru bdpx.github.io
• Трудоёмкость написания эффективных параллельных программ. edu.tsu.ru Необходимо планировать распределение данных и схему обмена между процессорами, чтобы минимизировать обращения к удалённой памяти. kpfu.ru