自動評価結果

入力文10,000文に対して得られた各手法の出力文10,000文について,自動評価を行った. 結果を表9.6に示す.


表: ベースライン,+英辞郎の自動評価結果(10,000文)
手法 BLEU METEOR RIBES WER
ベースライン 0.1534 0.4147 0.7312 0.7107
+英辞郎 0.1624 0.4376 0.7412 0.6864

9.6より,+英辞郎の手法における自動評価では,全ての指標においてベースラインを上回る結果となった.

また,7章の対訳句追加手法と比較して,全ての指標において+自動対訳句よりも高く,RIBES,WERの指標において+人手対訳句より高く,BLEU,METEORの指標において+人手対訳句より低い結果となった.