next up previous contents
次へ: 人手評価 上へ: 自動評価 戻る: TER   目次

WER

WERは,Word Error Rateの略で単語の誤り率を求める評価法である.以下に計算式を示す.
87#87     (3.30)

分子は参照文と出力文の比較における編集操作数のことである. WERの編集操作は挿入,置換,削除の3種類の編集を行うことである. なお,WERはスコアが小さい方が良い評価である.具体的な計算例を以下に示す.
[
c]例 日本語文: 事態は正常に戻っています。
参照文: Things are back to normal .
出力文: Things returned to normal .

計算方法
例では置換語数数=1,削除語数=1より,分子の編集操作数=2である.また分母は参照文の平均単語数=6である.


88#88 9#9 89#89 (3.31)
  9#9 90#90 (3.32)
  9#9 91#91 (3.33)



平成24年3月13日