評価1(
) 提案手法の結果がベースラインの結果よりも優れている
| 入力文 | 彼女 は ５ 人 の 子供 を 育て た 。 |
| 正解文 | She has brought up five children . |
| ベースライン | She is five children . |
| 提案手法 | She brought up five children . |
評価2(
) 提案手法の結果がベースラインの結果よりも劣っている
| 入力文 | 農園 は 道路 に 接し て いる 。 |
| 正解文 | The farm abuts on the road . |
| ベースライン | farm adjoins the road . |
| 提案手法 | The farm is roads are . |
評価3(
) どちらも同程度に意味を理解できる，または，どちらも同程度に意味を理解できない
| 入力文 | 彼 に よろしく お 伝え ください 。 |
| 正解文 | Give him my good wishes . |
| ベースライン | Please give my best regards to him . |
| 提案手法 | Please send him my best wishes . |
評価4(=) 提案手法とベースラインの翻訳結果が同一である
| 入力文 | この ビール は 気 が 抜け て いる 。 |
| 正解文 | This beer is flat . |
| ベースライン | This beer tastes flat . |
| 提案手法 | This beer tastes flat . |