Python Language
グローバルインタープリタロック（GIL）を回避する

備考

マルチプロセッシング。プール

簡単な答えは、Pythonでスレッドを使う方法を尋ねるときです：「しないでください。プロセスを使用してください。」マルチプロセッシングモジュールでは、スレッドの作成と同様の構文でプロセスを作成できますが、便利なPoolオブジェクトを使用することをお勧めします。

David Beazleyが最初にGILに対するスレッドの危険性を示すために使用したコードを使用して、 マルチプロセッシングを使用して書き直します。 プール ：

デビッドBeazleyのコードは、GILスレッドの問題を示した

from threading import Thread
import time
def countdown(n):
    while n > 0:
        n -= 1

COUNT = 10000000

t1 = Thread(target=countdown,args=(COUNT/2,))
t2 = Thread(target=countdown,args=(COUNT/2,))
start = time.time()
t1.start();t2.start()
t1.join();t2.join()
end = time.time()
print end-start

import multiprocessing
import time
def countdown(n):
    while n > 0:
        n -= 1

COUNT = 10000000

start = time.time()
with multiprocessing.Pool as pool:
    pool.map(countdown, [COUNT/2, COUNT/2])

    pool.close()
    pool.join()

end = time.time()
print(end-start)

スレッドを作成する代わりに、新しいプロセスが作成されます。各プロセスはそれ自体のインタプリタであるため、GILの衝突はありません。上記の例では2つしか必要ありませんが、マシン上にコアがあるほど多くのプロセスをオープンします。現実のシナリオでは、マシン上にプロセッサーと同じ長さ以上の長さを持つようにリストを設計したいと考えています。プールは、作成したプロセスの数まで、各引数で実行するように指示する関数を実行します。関数が終了すると、リスト内の残りの関数がそのプロセスで実行されます。

私は、 withステートメントを使用しwithも、プールを閉じて結合しないと、プロセスが存在し続けることがわかりました。リソースをクリーンアップするために、私は常にプールを閉じて参加します。

Cython nogil：

Cythonは別のPythonインタプリタです。 GILを使用しますが、GILを無効にすることができます。 ドキュメントを参照してください

例として、 David Beazleyが最初にGILに対するスレッドの危険性を示すために使用したコードを使用して、nogilを使用して書き直します。

デビッドBeazleyのコードは、GILスレッドの問題を示した

from threading import Thread
import time
def countdown(n):
    while n > 0:
        n -= 1

COUNT = 10000000

t1 = Thread(target=countdown,args=(COUNT/2,))
t2 = Thread(target=countdown,args=(COUNT/2,))
start = time.time()
t1.start();t2.start()
t1.join();t2.join()
end = time.time()
print end-start

ノギルを使って書き直しました（サイロンでの作品のみ）：

from threading import Thread
import time
def countdown(n):
    while n > 0:
        n -= 1

COUNT = 10000000

with nogil:
    t1 = Thread(target=countdown,args=(COUNT/2,))
    t2 = Thread(target=countdown,args=(COUNT/2,))
    start = time.time()
    t1.start();t2.start()
    t1.join();t2.join()
    
end = time.time()
print end-start

あなたがcythonを使っている限り、それは簡単です。ドキュメントでは、Pythonオブジェクトを変更しないように注意する必要があることに注意してください。

文の本文にあるコードは、Pythonオブジェクトを決して操作してはいけません.GILを最初に再取得しなければ、Pythonオブジェクトを操作するものを呼び出さないでください。 Cythonは現在これをチェックしていません。