gpt4 book ai didi

FastText 量化文档不正确?

转载 作者:行者123 更新时间:2023-12-03 01:38:39 31 4
gpt4 key购买 nike

我无法运行 FastText 量化,如文档中所示。具体来说,如备忘单页面底部所示:

https://fasttext.cc/docs/en/cheatsheet.html

当我尝试在我的训练模型“model.bin”上运行量化时:

./fasttext quantize -output model

以下错误将打印到 shell:

Empty input or output path.

我使用最新代码(2018 年 9 月 14 日)和旧代码(2018 年 6 月 21 日)的构建重现了此问题。由于记录的命令语法不起作用,我尝试添加输入参数:

./fasttext quantize -input [file] -output model

其中 [file] 是我的训练数据或训练模型。不幸的是,这两次尝试都导致了段错误,并且 FastText 没有错误消息。

量化 FastText 模型的正确命令语法是什么?另外,是否可以在单次运行 FastText 中同时训练和量化模型?

最佳答案

Python 解决方案:

# Quantize the model with retraining
model.quantize(input=train_data, qnorm=True, retrain=True, cutoff=200000)

# Save quantized model
model.save_model("model_quantized.bin")

关于FastText 量化文档不正确?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/52428575/

31 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com