Разделенные коллективные подпрограммы доступа к данным.

MPI предоставляет ограниченную форму``неблокирующих коллективных'' операций ввода-вывода для всех типов доступа к данным - использование разделенных коллективных подпрограмм доступа к данным. Эти подпрограммы называются ``разделенными'', потому что обычные коллективные разделены на две: начинающая подпрограмма и заканчивающая подпрограмма. Начинающая подпрограмма начинает операцию почти так же, как неблокирующее обращение к данным (например, MPI_FILE_IREAD). Заканчивающая подпрограмма завершает операцию почти так же, как тестирование или ожидание (например, MPI_WAIT). Как и в случае неблокирующих операций, пользователь не должен использовать буфер, переданный начинающей подпрограмме, пока подпрограмма ожидает обработки; операция должна быть завершена заканчивающей подпрограммой, прежде чем можно будет безопасно освобождать буферы и т.д. Разделенные коллективные операции доступа к данным над дескриптором файла fh подчиняются следующим семантическим правилам.

• В любом процессе MPI каждый дескриптор файла в любой момент может иметь не более одной активной разделенной коллективной операции.
• Начинающие вызовы коллективны для группы процессов, участвовавших в коллективном открытии, и подчиняются правилам порядка выполнения для коллективных вызовов.
• Заканчивающие вызовы коллективны для группы процессов, участвовавших в коллективном открытии, и подчиняются правилам порядка выполнения для коллективных вызовов. Каждый заканчивающий вызов соответствует предшествующему начинающему вызову той же коллективной операции. Когда делается заканчивающий вызов, ему должен предшествовать ровно один начинающий вызов той же операции, не имеющий пары.
• Реализация свободна реализовать любые разделенные коллективные подпрограммы доступа, используя соответствующие блокирующие коллективные подпрограммы, когда делается начинающий (например, MPI_FILE_READ_ALL_BEGIN) или заканчивающий (например,
  MPI_FILE_READ_ALL_END) вызов. Начинающий и заканчивающий вызовы предоставлены для того, чтобы позволить пользователю и реализации MPI оптимизировать коллективные операции.
• Разделенные коллективные операции не аналогичны соответствующим обычным коллективным операциям. Например, для операции простого коллективного чтения MPI_FILE_READ_ALL в одном процессе не аналогично паре MPI_FILE_READ_ALL_BEGIN/ MPI_FILE_READ_ALL_END другого процесса.
• Разделенные коллективные подпрограммы должны определять буфер и в начинающей и в завершающей подпрограммах. Определив буфер, получающий данные, в завершающей подпрограмме, можно избежать многих (хотя и не всех) проблем, описанных в разделе ``Проблемы с регистровой оптимизацией''.
• Коллективные операции ввода-вывода над дескриптором файла недопустимы одновременно с разделенными коллективными операциями доступа над этим дескриптором (т.е. между началом и завершением доступа). Это значит, что MPI_File_read_all_begin(fh, ...); ... MPI_File_read_all(fh, ...); ... MPI_File_read_all_end(fh, ...); ошибочно.
• В многопоточной реализации любые разделенные коллективные начинающая и завершающая операции, вызываемые процессом, должны вызываться из одного потока. Данное ограничение введено для облегчения реализации в многопоточном случае. (Заметим, что мы уже запретили иметь два потока, начинающих разделенную коллективную операцию над одним дескриптором файла, так как в любой момент только одна разделенная коллективная операция над дескриптором файла может быть активна.)