N-gramモデル

Next: スム〖ジング Up: 咐胳モデル Previous: 咐胳モデル 鐩

N-gramモデル

琵纷溯条では办忍弄に·

-gramモデルを脱いるˉ

-gramモデルは·帽胳误 $\omega_1$ , $\omega_2$ ,..., $\omega_i$ が涂えられたときに·その稿に帽胳

がくる澄唯 $P(x\vert\omega_1,\omega_2,\dots,\omega_i)$ を·すぐ涟の

-1改の帽胳を掘凤とした澄唯として·纷换するモデルであるˉ笆布に纷换及を绩すˉ

$\displaystyle P(\omega_{1}^{n})$	$\textstyle =$	$\displaystyle P(c_{1})∵P(c_{2}\vert c_{1})∵P(c_{3}\vert c_{2}c_{1})\cdots$	(2.20)
	$\textstyle =$	$\displaystyle \prod_{i=1}^{n}P(\omega_{i}\vert c_{1}c_{2}c_{3} \cdots c_{i-1})$	(2.21)
	$\textstyle \simeq$	$\displaystyle \prod_{i=1}^{n}P(\omega_{i}\vert\omega_{i-N+1},\omega_{i-N+2}, \cdots \omega_{i-1})$	(2.22)

毋えば·``I am Japanese ."という毖胳矢に滦する2-gramモデルは笆布のようになるˉ

$\displaystyle P(e = {\rm \lq\lq I\,am\,Japanese\,.''}) \simeq P({\rm I}) \times P({\... ... I}) \times P({\rm Japanese}\vert{\rm am}) \times P({\rm .}\vert{\rm Japanese})$

(2.23)

3-gramモデルなら $P$ (Japanese $\vert$ I am)·4-gramモデルなら $P$ (. $\vert$ I am Japanese)となる.

2019-03-29