我在(https://fasttext.cc/docs/en/crawl-vectors.html)上下载了一个经过预训练的fastText模型(德语),并尝试通过以下方式将其加载到Python包装器中:
model = fasttext.load_model("model_filename.bin")
但是,看来我没有足够的内存来加载模型。
有没有一种方法可以在使用前拆分二进制模型? (例如,加载前半部分,如果不匹配,则加载后半部分)(我可以split -b
紧跟在矢量之后吗?)
还是我还有另一种更聪明的方式仍然可以使用单词向量?
(最终,我需要使用一组句子中具有的单词的单词向量,即句子相似性分类)