next up previous contents
次へ: 重文複文の実験 上へ: 日本語文の語順をランダムに変えた実験 戻る: 日本変更文の例   目次

単文の実験

自動評価の結果を表6.23に示す.


表: 単文の実験の自動評価結果
  BLEU NIST METEOR RIBES TER WER
検証手法 0.1271 4.7223 0.4468 0.7010 0.7197 0.7467
ベースライン 0.1341 4.8670 0.4560 0.7040 0.7047 0.7327

検証手法とベースラインの対比較評価の結果を表6.24に示す.また,検証手法の方が優れている翻訳例を表6.25,ベースラインの方が優れている翻訳例を表6.26に示す.なお,下線部は間違いと判断した箇所を表す.


表: 検証手法とベースラインの対比較評価結果
検証手法○ ベースライン○ 差なし 同一出力
5 3 79 13


表: 検証手法の方が優れている翻訳例
例1
入力文 この 風邪 薬 は よく 効く 。
日本語変更文(検証) 効く 薬 は よく この 風邪 。
検証手法○ This medicine works very well for a cold .
ベースライン This medicine works well cold .
参照文 This cold medicine is effective .
例2
入力文 いつ でも 喜ん で お手伝い し ます 。
日本語変更文(検証) いつ でも 喜ん で お手伝い し ます 。
検証手法○ I will be glad to help you any time .
ベースライン I help you any time .
参照文 I'm always ready to help .
例3
入力文 空気 は 黒い 煙 で もうもうと し て い た 。
日本語変更文(検証) 黒い 空気 は 煙 で もうもうと し て い た 。
検証手法○ The air was filled with black smoke .
ベースライン The air was filled with of black smoke .
参照文 The air was thick with black smoke .


表: ベースラインの方が優れている翻訳例
例1
入力文 我が 社 に は 優秀 な 技術 者 が 居り ます 。
日本語変更文(検証) 我が 社 に は 優秀 な 技術 者 が 居り ます 。
検証手法 The 居り engineers a brilliant in our company .
ベースライン○ There is a brilliant engineers in our company .
参照文 Our company has some talented technicians .
例2
入力文 その 試合 は テレビ で 見 まし た 。
日本語変更文(検証) その 試合 は 見 まし た テレビ で 。
検証手法 The game I saw on television .
ベースライン○ I saw the match on TV .
参照文 I watched the game on television .
例3
入力文 私 は 弟 と 三つ 年 が 離れ て いる 。
日本語変更文(検証) 三つ 弟 と 離れ て いる 年 が 私 は 。
検証手法 My brother is and three years .
ベースライン○ My brother and I are three years apart .
参照文 My younger brother and I are three years apart in age .


next up previous contents
次へ: 重文複文の実験 上へ: 日本語文の語順をランダムに変えた実験 戻る: 日本変更文の例   目次
平成28年3月16日