BLEU | NIST | METEOR | RIBES | TER | WER | |
検証手法 | 0.1271 | 4.7223 | 0.4468 | 0.7010 | 0.7197 | 0.7467 |
ベースライン | 0.1341 | 4.8670 | 0.4560 | 0.7040 | 0.7047 | 0.7327 |
検証手法とベースラインの対比較評価の結果を表6.24に示す.また,検証手法の方が優れている翻訳例を表6.25,ベースラインの方が優れている翻訳例を表6.26に示す.なお,下線部は間違いと判断した箇所を表す.
例1 | |
入力文 | この 風邪 薬 は よく 効く 。 |
日本語変更文(検証) | 効く 薬 は よく この 風邪 。 |
検証手法○ | This medicine works very well for a cold . |
ベースライン | This medicine works well cold . |
参照文 | This cold medicine is effective . |
例2 | |
入力文 | いつ でも 喜ん で お手伝い し ます 。 |
日本語変更文(検証) | いつ でも 喜ん で お手伝い し ます 。 |
検証手法○ | I will be glad to help you any time . |
ベースライン | I help you any time . |
参照文 | I'm always ready to help . |
例3 | |
入力文 | 空気 は 黒い 煙 で もうもうと し て い た 。 |
日本語変更文(検証) | 黒い 空気 は 煙 で もうもうと し て い た 。 |
検証手法○ | The air was filled with black smoke . |
ベースライン | The air was filled with of black smoke . |
参照文 | The air was thick with black smoke . |
例1 | |
入力文 | 我が 社 に は 優秀 な 技術 者 が 居り ます 。 |
日本語変更文(検証) | 我が 社 に は 優秀 な 技術 者 が 居り ます 。 |
検証手法 | The 居り engineers a brilliant in our company . |
ベースライン○ | There is a brilliant engineers in our company . |
参照文 | Our company has some talented technicians . |
例2 | |
入力文 | その 試合 は テレビ で 見 まし た 。 |
日本語変更文(検証) | その 試合 は 見 まし た テレビ で 。 |
検証手法 | The game I saw on television . |
ベースライン○ | I saw the match on TV . |
参照文 | I watched the game on television . |
例3 | |
入力文 | 私 は 弟 と 三つ 年 が 離れ て いる 。 |
日本語変更文(検証) | 三つ 弟 と 離れ て いる 年 が 私 は 。 |
検証手法 | My brother is and three years . |
ベースライン○ | My brother and I are three years apart . |
参照文 | My younger brother and I are three years apart in age . |