可以在加载之前拆分fastText模型吗?

时间:2019-11-25 15:12:42

标签: python nlp bigdata binaryfiles fasttext

我在(https://fasttext.cc/docs/en/crawl-vectors.html)上下载了一个经过预训练的fastText模型(德语),并尝试通过以下方式将其加载到Python包装器中:

model = fasttext.load_model("model_filename.bin")

但是,看来我没有足够的内存来加载模型。

有没有一种方法可以在使用前拆分二进制模型? (例如,加载前半部分,如果不匹配,则加载后半部分)(我可以split -b紧跟在矢量之后吗?) 还是我还有另一种更聪明的方式仍然可以使用单词向量? (最终,我需要使用一组句子中具有的单词的单词向量,即句子相似性分类)

0 个答案:

没有答案