next up previous contents
次へ: METEOR 上へ: 評価方法 戻る: BLEU   目次

NIST

NISTではBLEUと同様に語順の正しさで比較を行うが,5-gramを用いる. NISTは以下の式で計算される.
$\displaystyle NIST_{score} = BP \times \sum_{N=1}^N \frac{\displaystyle\sum_i \...
...eft( w_1 ... w_n \right) \Bigr) }{\sum_i 出力文iと正解文iで一致したN-gramの数 }$     (2.13)
$\displaystyle Info_i \left( w_1 ... w_n \right) = \log_2 \frac{評価コーパス中 \...
...w_1 ... w_{n-1} \right)の数}{評価コーパス中の \left( w_1 ... w_n \right) の数 }$     (2.14)



平成23年3月23日