並列計算を利用するための標準化された規格(ライブラリ)で、計算機(もしくはCPU)間でデータの送受信が可能となる
ある仕事を複数の単体計算機のCPUを使用して実行するため、計算機をネットワークで結合し、MPIを 使用して各計算機間でデータ通信をしながら実行する計算を言います.各CPUはお互いに完全に独立しており、それぞれメモリーとOSが存在します.