next up previous contents
Next: 提案手法の利点 Up: High order Joint Probability(提案手法) Previous: High order Joint Probability(提案手法)   ���罨�

提案手法の概要

本研究では,言語モデルに$N$-gramモデルの代わりにHigh order Joint Probability(以下Joint Probability)を用いる.以下の式(2)にその計算式を示す[2].


\begin{eqnarray*}
\hspace{-3cm}\sum_{j=0}^{M-1}\sum_{i=0}^{N-1}P(J_{j-2},J_{j-1},J_j,E_{i-2},E_{i-1},E_i)
\end{eqnarray*}


\begin{eqnarray*}\hspace{-1cm}\times\log_2\frac{P(J_{j-2},J_{j-1},J_j,E_{i-2},E_{i-1},E_i)}{P(J_{j-2},J_{j-1},J_j)P(E_{i-2},E_{i-1},E_i)}
\end{eqnarray*}


\begin{eqnarray*}
\hspace{-2cm} =\sum_{j=0}^{M-1}\sum_{i=0}^{N-1}\frac{count(J_{j-2},J_{j-1},J_j,E_{i-2},E_{i-1},E_i)}{N_{je}}
\end{eqnarray*}



$\displaystyle \hspace{-1.4cm}\times\log_2{\frac{\frac{count(J_{j-2},J_{j-1},J_j...
...{\frac{count(J_{j-2},J_{j-1},J_j)}{N_j}\frac{count(E_{i-2},E_{i-1},E_i)}{N_e}}}$     (4.1)


$J_j$:日本語単語 $M$:日本文の単語数 
$E_i$:英語単語 $N$:英文の単語数
$P$:出現確率 $count$:対訳学習文中の頻度
$N_{je}$:対訳学習文中の日本語単語の三つ組と英語単語の三つ組の総数
$N_j$:対訳学習文中の日本語単語の三つ組の総数 
$N_e$:対訳学習文中の英語単語の三つ組の総数


2019-03-29