入力文10,000文に対して得られた各手法の出力文10,000文について,自動評価を行った. 結果を表9.6に示す.
手法 | BLEU | METEOR | RIBES | WER |
ベースライン | 0.1534 | 0.4147 | 0.7312 | 0.7107 |
+英辞郎 | 0.1624 | 0.4376 | 0.7412 | 0.6864 |
表9.6より,+英辞郎の手法における自動評価では,全ての指標においてベースラインを上回る結果となった.
また,7章の対訳句追加手法と比較して,全ての指標において+自動対訳句よりも高く,RIBES,WERの指標において+人手対訳句より高く,BLEU,METEORの指標において+人手対訳句より低い結果となった.