Pythonマルチプロセスにおけるメモリのリークの解消方法

2年 ago
海斗, 葵
1 minute

Python におけるマルチプロセスにおけるメモリリークの問題は、主に子プロセスが正常終了していないことが原因です。マルチプロセスにおけるメモリリークを解決する方法を以下に示します。

  1. マルチプロセッシング.Pool
  2. マルチプロセッシングプールの
  3. プール
  4. 閉じる
  5. joinする
from multiprocessing import Pool

def worker():
    # 子进程的工作逻辑

if __name__ == '__main__':
    pool = Pool()
    pool.map(worker, range(5))
    pool.close()
    pool.join()
  1. どうしても
  2. ついに
import multiprocessing

def worker():
    try:
        # 子进程的工作逻辑
    finally:
        # 在子进程退出时释放资源

if __name__ == '__main__':
    p = multiprocessing.Process(target=worker)
    p.start()
    p.join()
  1. ネイティブな日本語で言い換えると
  2. 日本語でネイティブに言い換えて、1つのオプションだけで：
import multiprocessing

def worker():
    with open('file.txt', 'r') as f:
        # 子进程的工作逻辑

if __name__ == '__main__':
    p = multiprocessing.Process(target=worker)
    p.start()
    p.join()

上記の対策を行うことで、マルチプロセスにおけるメモリーリーク問題を回避できます。また、マルチプロセスのコードを書くときは、グローバル変数や共用リソースの使用を可能な限り避け、リークリスクを低減することをおすすめします。

bannerAds