BLEU | NIST | METEOR | RIBES | TER | WER | |
検証手法 | 0.1016 | 4.2077 | 0.3978 | 0.6613 | 0.7848 | 0.8191 |
ベースライン | 0.1128 | 4.3727 | 0.4075 | 0.6651 | 0.7830 | 0.8174 |
検証手法とベースラインの対比較評価の結果を表6.28に示す.また,検証手法の方が優れている翻訳例を表6.29,ベースラインの方が優れている翻訳例を表6.30に示す.なお,下線部は間違いと判断した箇所を表す.
例1 | |
入力文 | 彼 は 彼女 と 行く と 自発 的 に 申し出 た 。 |
日本語変更文(検証) | 彼 は 彼女 と 行く と 自発 的 に 申し出 た 。 |
検証手法○ | He volunteered to go with her . |
ベースライン | He voluntarily going with her . |
参照文 | He volunteered to go with her . |
例2 | |
入力文 | また お 会い でき て 光栄 です 。 |
日本語変更文(検証) | お 会い でき て 光栄 です また 。 |
検証手法○ | It is a great honor to see you again . |
ベースライン | It is a great honor and see you again . |
参照文 | Great to see you again . |
例3 | |
入力文 | これ は 僕 が 設計 し て 建て た 家 だ 。 |
日本語変更文(検証) | 建て た 僕 が 家 だ これ は 設計 し て 。 |
検証手法○ | This is the house where I was built design . |
ベースライン | This house was built to design of me . |
参照文 | I planned and built this house . |
例1 | |
入力文 | 彼女 の 帽子 は 実に へんてこ な もの だ 。 |
日本語変更文(検証) | 彼女 の 帽子 は 実に へんてこ な もの だ 。 |
検証手法 | The へんてこ of her hat . |
ベースライン○ | Her hat is really weird . |
参照文 | Her hat is a horror . |
例2 | |
入力文 | 日 が 出 て 霧 を 払う 。 |
日本語変更文(検証) | 日 が 出 て 霧 を 払う 。 |
検証手法 | The day for the fog . |
ベースライン○ | The sun dispels the fog . |
参照文 | The sun dispels the mist . |
例3 | |
入力文 | 私 は 失敗 し て 目 が 覚め た 。 |
日本語変更文(検証) | 私 は 失敗 し て 目 が 覚め た 。 |
検証手法 | I woke up , I failed . |
ベースライン○ | I woke with my failure . |
参照文 | My failure brought me to my senses . |