next up previous contents
Next: 追加実験1(句に基づく統計翻訳器での実験) Up: 考察 Previous: 対訳句辞書を用いた未知語処理   目次

デコーダ内とデコーダ外の未知語処理の差

本研究では,デコーダ外で未知語処理を行ったが,デコーダ内で未知語処理を行うことも可能である.本研究において,デコーダ外で未知語処理を行った大きな理由は,他の統計翻訳器への応用を可能にするためである.また,川原らの研究[18]より,デコーダ内で未知語処理を行う方法よりも,デコーダ外で未知語処理を行う方法の方が翻訳精度が高いということも報告されている.表7.20と表7.21にそれぞれの未知語の翻訳精度を示す.また,表7.22と表7.23にそれぞれの文全体の翻訳精度を示す.


表 7.20: デコーダ外で処理した場合の未知語の翻訳精度(213単語中)
\scalebox{1.0}{
\begin{tabular}{\vert c\vert c\vert c\vert}
\hline
翻訳成...
... \\
\hline
186 単語 & 96/186 単語 & 90/186 \\
\hline
\end{tabular} }



表 7.21: デコーダ内で処理した場合の未知語の翻訳精度(約210単語中)
\scalebox{1.0}{
\begin{tabular}{\vert c\vert c\vert c\vert}
\hline
翻訳成...
...訳 \\
\hline
60 単語 & 20/60 単語 & 40/60 \\
\hline
\end{tabular} }



表 7.22: デコーダ外の未知語処理における人手評価結果(100文中)
\scalebox{1.0}{
\begin{tabular}{\vert c\vert c\vert c\vert c\vert}
\hline
デ...
...出力\\
\hline
4 文 & 2 文 & 79 文 & 15 文 \\
\hline
\end{tabular} }



表 7.23: デコーダ内の未知語処理における人手評価結果(100文中)
\scalebox{1.0}{
\begin{tabular}{\vert c\vert c\vert c\vert c\vert}
\hline
デ...
...出力\\
\hline
4 文 & 3 文 & 60 文 & 33 文 \\
\hline
\end{tabular} }


以上の結果より,デコーダ内で未知語処理を行った場合の未知語の翻訳精度は約30%であるのに対して,デコーダ外で未知語処理を行った場合の未知語の翻訳精度は約50%だった.したがって,今後の未知語処理の研究では,本研究のようにデコーダ外で未知語処理を行う方法を採用した方が良いと考える.



s122019 2018-02-15