[python] 병렬 컴퓨팅에서의 메모리 관리

12 Dec 2023

python

공유 메모리 시스템

공유 메모리 시스템에서는 모든 프로세스가 동일한 물리적 메모리 공간을 공유합니다. 이는 효율적인 데이터 공유를 가능하게 하지만, 동기화(Synchronization) 문제에 주의해야 합니다. 파이썬에서는 multiprocessing 모듈을 사용하여 공유 메모리를 다룰 수 있습니다.

import multiprocessing

# 공유 메모리 생성
shared_data = multiprocessing.Array('i', 10)

# 공유 메모리에 접근
def update_data(i):
    shared_data[i] += 1

분산 메모리 시스템

분산 메모리 시스템에서는 각 프로세스가 독립적인 메모리 공간을 가지며 통신을 통해 데이터를 교환합니다. 주로 메시지 전달(Message Passing) 인터페이스를 이용하여 통신합니다. 파이썬에서는 mpi4py 모듈을 통해 메시지 전달 인터페이스를 지원합니다.

from mpi4py import MPI

comm = MPI.COMM_WORLD

# 데이터 전송
data = {'key': 'value'}
comm.send(data, dest=1)

메모리 관리는 병렬 컴퓨팅에서 효율적인 코드를 작성하는 핵심 부분 중 하나입니다. 공유 메모리 시스템과 분산 메모리 시스템 각각의 특징을 잘 이해하고 적절한 방법을 선택하는 것이 중요합니다.

이 글은 Parallel Computing in Python와 Official Python Documentation을 참고하여 작성되었습니다.

목차

공유 메모리 시스템

분산 메모리 시스템