next up previous contents
次へ: RIBES 上へ: 自動評価 戻る: METEOR   目次

IMPACT

IMPACTは,名詞句のチャンクを用いて評価を行う手法である. 参照文と出力文において,対応する名詞句を用いて,一致する単語列を正確に決定する. さらに,名詞句の出現順に関して類似性を決定する. IMPACTは再現率と適合率からF値を求め,F値をIMPACTのスコアとしている. 計算式を以下に示す.
69#69     (3.20)


70#70     (3.21)


71#71     (3.22)


72#72     (3.23)

ここで,73#73とは最長共通部分列であり,74#74は73#73の決定プロセスの繰り返し数を示す. そして,75#75は74#74に対するカウンターで,54#54と55#55はパラメータである. またmは参照文の単語数,76#76は出力文の単語数,77#77は共通部分の単語数を示す. なお,IMPACTはスコアが大きい方が良い評価である.



平成24年3月13日