スム〖ジング

Next: デコ〖ダ〖 Up: 咐胳モデル Previous: N-gramモデル 鐩

スム〖ジング

-gramモデルにおいて·慨完できる猛を换叫するためには络惮滔コ〖パスを蝗脱しなければいけない.しかし·悸狠は驴くの帽胳误の叫附唯は0となるため·慨完できる猛を夸年できない眷圭が驴い.そこで·それを豺疯するためのスム〖ジングの缄恕が捏捌されているˉスム〖ジングとは·栏弹澄唯が0となるのを松ぐために·络きい澄唯猛を井さくし·井さい澄惟猛を络きくする缄恕であるˉ洛山弄な缄恕としてバックオフスム〖ジング(back-off smooting)があり·バックオフスム〖ジングでは池浆デ〖タに叫附しない

-gramの猛を(

-1)-gramの猛から夸年を乖うˉ3-gramの眷圭の毋を笆布の及に绩すˉ

$\displaystyle P(w_{i}\vert w_{i-1}^{i-2}) =\left\{ \begin{array}{ll} \lambda(w_... ... \ N(w_{n-2}^{n-1}) \\ P(w_{i}\vert w_{i-1}) & other \\ \end{array} \right.$

(2.24)

$\lambda$ はディスカウントと钙ばれる犯眶で·叫附しない-gramに滦して澄唯を烧涂するために·(-1)-gramから澄唯を夸年するˉまた· $\alpha$ は澄唯の下を1にするための赖惮步犯眶であるˉ``-ndiscount''や ``-kndiscount''や``-ukndiscount''などの·ディスカウント犯眶を滇める数恕が驴眶赂哼するˉ

2019-03-29