人手評価方法

使用した入力文において，未知語を含む文が213文あった．そのうち，Model1対訳単語辞書を使用して未知語処理できた文が86文あった．これら86文において，未知語処理前の文（対訳単語辞書なし）と未知語処理後の文（Model1対訳単語辞書を使用）を，人手による対比較評価を行った．評価基準を以下に示す．

• 未知語処理 ○： 未知語が適切な対訳単語に翻訳され，未知語処理後の文の意味が読み取れる
• 未知語処理$\times$ ： 未知語が不適切な対訳単語に翻訳され，未知語処理前の文の方が意味が読み取れる
• 差なし： 2つの出力文の意味が読み取れない