gpt4 book ai didi

python-3.x - spaCy is_oov 未按预期工作

转载 作者:行者123 更新时间:2023-12-01 18:39:39 25 4
gpt4 key购买 nike

is_oov 似乎不适用于我知道词汇表中的单词。这个用例有可能是不正确的吗?

import spacy
nlp = spacy.load('en')

doc = nlp('I am sflmgmavknsaccasas dog cat bird bulbasaur')

[tok.is_oov for tok in doc]
[True, True, True, True, True, True, True]
  • spaCy版本:2.0.9
  • 平台:osx 10.13.4
  • Python版本:3.6.4
  • 型号:zh

最佳答案

您需要最大的语料库才能实现此目的。

因此您需要加载 en_core_web_lg 而不是其他版本。尤其是较小的版本(smen)。

关于python-3.x - spaCy is_oov 未按预期工作,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/50238248/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com