spaCy需要一个不存在的文件:strings.json

时间:2017-03-26 02:00:15

标签: python spacy

我正在运行pytextrank处于第二阶段,我从spaCy得到了这个错误:

File "C:\Anaconda3\lib\pathlib.py", line 371, in wrapped return strfunc(str(pathobj), *args)

FileNotFoundError: [Errno 2] No such file or directory: 'C:\\Anaconda3\\lib\\site-packages\\spacy\\data\\en\\vocab\\strings.json'

我找了strings.json,但没有这样的东西。

有趣的是,当我使用以下错误代码安装spaCy时,存在与pathlib.py类似的错误:

OSError: Symbolic link privilege not held

你们有什么想法吗? 感谢

2 个答案:

答案 0 :(得分:8)

最后,我可以在stackoverflow中回答问题。我发生了同样的问题,但最终解决了。这是我的建议:

1。从python -m spacy或github

下载spaCy模型 两种方式都很方便。

1)。来自python spacy:

python3 -m spacy download en

假设您正在使用python3 +,可以自动完成并生成新的模型包,您可以通过import en或使用spacy.load('en')

导入

2)。来自github

transfer link,选择最新版本并下载。

2。 (如果你没有使用python -m方式,那么你想手动链接模型)链接你下载的模型

这是最重要的部分,您必须解压缩下载的tar或gzip文件,并获取一个文件夹,但这仍然是您想要的链接路径。

.
├── en_core_web_md-1.2.1
│   ├── deps
│   │   ├── config.json
│   │   └── model
│   ├── meta.json
│   ├── ner
│   │   ├── config.json
│   │   └── model
│   ├── pos
│   │   ├── config.json
│   │   └── model
│   └── vocab
│       ├── gazetteer.json
│       ├── lexemes.bin
│       ├── oov_prob
│       ├── serializer.json
│       ├── strings.json
│       └── vec.bin

您必须将文件夹与结构链接。 spacy将通过您的链接快捷方式名称链接文件夹。

这是您需要的链接脚本:

base_path=`pwd`
sudo python3 -m spacy link ${base_path}/en_core_web_md-1.2.1 en_core_web --force

您可以在该文件夹旁边创建一个.sh文件并运行它。

就是这样!

答案 1 :(得分:1)

当您将spaCy和模型安装到系统目录中时,通常会发生Symbolic link privilege not held错误,但您的用户没有创建符号链接所需的权限。要解决此问题,请以管理员身份再次运行downloadlink,或者如果不可行,请使用virtualenv将所有内容安装到用户目录中(有关详情,请参阅在此,请参阅troubleshooting docs)。

从v1.7.0开始,spaCy创建了符号链接。 spacy/data目录中的shortcut links。这样可以更轻松地将模型存储在任何位置,将它们安装为Python包并使用自定义名称加载它们,例如spacy.load('my_model')

您的情况可能发生的情况是,由于权限错误,spaCy无法设置此链接,现在无法找到并加载模型 - 包括vocab/strings.json。 (这里spaCy失败的方式是不理想的 - 这已经在v1.7.3中得到修复。)

由于已经安装了该模型,您只需为其创建一个新的符号链接(以管理员或virtualenv形式):

python -m spacy link en_core_web_sm en

(如果您已下载different model,只需将en_core_web_sm替换为该模型的名称。en是要使用的快捷方式,可以是您想要的任何名称。 )

编辑:如果您只想使用标记器并且不关心模型,或者想要使用尚未附带统计模型的supported languages之一,您也可以在v1.7.3中导入Language类:

from spacy.fr import French
nlp = French()