python - Spacy nlp(text) 线程安全吗？

Question

以下线程在 spacy 中安全吗？

nlp = spacy.load('en')
nlp(text)

Answer 1

是的。有关更多信息，请参阅此线程(无双关语...):https://github.com/explosion/spaCy/issues/172
如果可能，不要多线程调用 nlp ，考虑拨打 nlp.pipe这是对 spaCy 管道的多线程调用。

for doc in nlp.pipe(texts, n_threads=16, batch_size=10000):
    analyse_text(doc)

更多信息在这里: https://explosion.ai/blog/multithreading-with-cython