如何使用spacy的nlp.pipe功能跟踪进度？

Question

我正在用Python和Spacy编写代码。 我想跟踪nlp.pipe(sentences)的执行进度，因为它会持续很多时间。 怎么做

nlp = spacy.load('en_core_web_sm')
sentences = [...]
docs = nlp.pipe(sentences, n_process=8)

Answer 1

使用tqdm

from tqdm import tqdm

nlp = spacy.load('en_core_web_sm')
sentences = [...]
for doc in tqdm(nlp.pipe(sentences, n_process=8)):
    ... do stuff ...