个人中心
文章发布
退出
作者热门文章
- html - 出于某种原因，IE8 对我的 Sass 文件中继承的 html5 CSS 不友好？
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景？
25
4
Python NLTK中有BLEU评分的实现， nltk.translate.bleu_score.corpus_bleu
但我不确定它是否与 mtevalv13a.pl script 相同.
它们有什么区别？
最佳答案
TL;DR
使用https://github.com/mjpost/sacrebleu在评估机器翻译系统时。
简而言之
不，NLTK 中的 BLEU 与 mteval-13a.perl 并不完全相同。
但它可以非常接近，请参阅 https://github.com/nltk/nltk/issues/1330#issuecomment-256237324
nltk.translate.corpus_bleucorresponds tomteval-13a.plup to the 4th order of ngram with some floating point discrepancies
详细的比较和使用的数据集可以从https://github.com/nltk/nltk_data/blob/gh-pages/packages/models/wmt15_eval.zip下载或:
import nltk
nltk.download('wmt15_eval')
主要区别:
长
mteval-13a.pl 和 nltk.translate.corpus_bleu 之间有几个区别:
第一个区别是 mteval-13a.pl 带有自己的 NIST 分词器，而 NLTK 版本的 BLEU 是该指标的实现并假设输入已预先标记化。
另一个主要区别是 mteval-13a.pl 期望输入采用 .sgm 格式，而 NLTK BLEU 则采用 python 列表字符串，请参阅README.txt in the zipball here for more information of how to convert textfile to SGM .
mteval-13a.pl 期望 ngram 顺序至少为 1-4。如果句子/语料库的最小 ngram 阶数小于 4，它将返回 0 概率，即 math.log(float('-inf'))。为了模拟这种行为，NLTK 添加了一个 _emulate_multibleu 标志:
mteval-13a.pl 能够生成 NIST 分数，而 NLTK 没有 NIST 分数实现(至少目前还没有)
除了差异之外，NLTK BLEU 分数还包含更多功能:
处理原始 BLEU(Papineni，2002 年)忽略的边缘情况
此外，为了处理 Ngram 最大阶数 < 4 的边缘情况，各个 ngram 精度的统一权重将重新加权，以使权重的质量总和为 1.0
同时 NIST has a smoothing method对于几何序列平滑，NLTK has an equivalent object with the same smoothing method以及更多平滑方法来处理 Chen and Collin, 2014 中的句子级 BLEU
最后，为了验证 NLTK 版本的 BLEU 中添加的功能，添加了回归测试来说明它们，请参阅 https://github.com/nltk/nltk/blob/develop/nltk/test/unit/translate/test_bleu.py
关于machine-learning - mteval-v13a.pl 和 NLTK BLEU 有什么区别？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/46084574/
25
4
0
我有一个 k*n矩阵 X 和 k*k矩阵A。对于X的每一列，我想计算标量 X[:, i].T.dot(A).dot(X[:, i]) (或者，数学上， Xi' * A * Xi )。 目前，我有一个
很难说出这里问的是什么。这个问题是含糊的、模糊的、不完整的、过于宽泛的或修辞性的，无法以目前的形式得到合理的回答。如需帮助澄清此问题以便重新打开它，visit the help center 。 已关
我是 VueJS 的新手。我已经使用 vuetify/webpack-ssr 模板创建了一个项目，现在我想创建一个登录页面，但是没有显示表单，控制台给了我以下信息: [Vue warn]: Unkno
我尝试将 value 插入到 C++ vector v 之前的第 i 元素(或元素 (i-1) 之后) )。代码很简单 v.insert(v.begin() + i, value); 我确信当 i 介
我需要显示使用合并排序算法排序的 vector 。然而，当我使用 v.begin() 时，我的 friend 使用 v.data() 来传递 vector 。他的代码运行良好，而我的却不行。请解释。
这是我的命令(url1、url2、url3、url4 是占位符): ffmpeg -i url1 -i url2 -i url3 -i url4 -filter_complex “[1:v:0] [1
我以前用过Vue，我知道怎么用v-for渲染元素序列，v-if或v-show有条件地显示元素，并且 v-model例如，控制段落的内容。 但现在我需要对 DOM 进行更精细的控制: 我有一个range
我正在学习所有权和借用。 borrow1 和borrow2 的区别在于在borrow2 打印时使用了&: fn borrow1(v: &Vec) { println!("{}", &v[10]
我找不到一种方法来选择不同的选项来渲染 v-for 中的文本。是否有可能或者我是否需要以不同的方式构建逻辑来执行类似于下面的代码的操作？ // i
Iterable 的三个直接子类型是 Map , Seq , 和 Set .除了性能问题之外，似乎还有一个 Seq是从整数到值的映射，以及 Set是从值到 bool 值的映射(如果值在集合中，则为 t
我想应用一个计算方法，如果键存在则增加值，否则将 1。有 Map map = new HashMap<>(); 我不明白为什么 for (int i = 0; i v != null ? v++ :
标准(IEEE 754/C)是否保证以下代码断言永远不会失败？ int main() { for ( /* all possible float / double values */ )
代码由Vue语言编写，使用Element-ui框架， 如果一个对象包含某些内容，则会显示该内容，如果不包含则禁用菜单按钮。 输出应该是这样的: a、b(禁用)、c、d、e 但我的是这样的: a、a(禁
如果我这样做: {{ morevalue }} {{ value }} v-else 中的跨度也会在第二个 V-FOR 上循环，即使它上面没有任何 v-for，为什么？ 这是
如果我这样做: {{ morevalue }} {{ value }} v-else 中的跨度也会在第二个 V-FOR 上循环，即使它上面没有任何 v-for，为什么？ 这是
我将 Vue.js 与 Vuetify 一起使用，我正在尝试使用 v-data-table 从后端加载菜单列表并使用 对其设置一些权限v-switches 但我在尝试 v-model 数组时遇到问题:
我在 Java 的流式操作中努力维护我想要的数据结构，这很可能是由于缺乏正确的理解和实践。 public class Main { public static void main(String
我正在尝试为匹配中的每个匹配呈现一些 HTML，但是，我不太确定 实际上是正确的。 更具体地说，我不确定我是否可以使用 v-bind:match='match'在与循环相同的元素上 v-for='ma
所以我想知道为什么这个 v-if 和 v-else 语句不起作用，为什么我要以不同的方式解决它。 代码如下 Required: Select a Workflow {{ isChain ?
我有一个 VueJS 组件 ，我在同一个模板中使用了两次来显示两组不同的数据。每个都显示在自己的 使用 v-if 切换的容器在导航选项卡上。 似乎这些组件被实例化为同一个实例。我调用 console
我是一名优秀的程序员,十分优秀！