Google Brain 的“Attention Is All You Need”论文中使用的 BLEU 分数是多少?

数据挖掘 神经网络 机器翻译
2021-10-10 11:46:17

Google Brain 的Attention is All You Need关于序列到序列翻译报告的论文:

我们的模型在 WMT 2014 英德翻译任务上达到了 28.4 BLEU,比现有的最佳结果(包括合奏)提高了 2 BLEU 以上

BLEU 上的维基百科条目说:

BLEU 的输出总是一个介于 0 和 1 之间的数字

Google Brain 论文使用的是什么 BLEU 定义?我在论文本身中找不到单独的定义。

1个回答

BLEU (Bi Lingual Evaluation Understudy) 是一种算法,用于评估已从一种自然语言机器翻译 (MT) 到另一种自然语言的文本质量。BLEU 通常以 0 到 1 的等级衡量,1 是假设的“完美”翻译。

Google 使用相同的 BLEU 定义,但将典型分数乘以 100。