人手評価の結果

100文を対象に,人手評価を行った結果を表6.2に示す.
Table: 人手評価結果(100文)
  ×
PMI 36 18 46
Joint 18 17 65
Jaccard 32 21 47
Dice 29 20 51
Simpson 26 21 53

5.6と表6.2を比較すると,PMI以外の手法は○が減少している. 特に,Jointの減少数は顕著である. 一方で,PMIは○が増加している. このことから,PMIを用いることで,第1候補以外の優れた出力文を選択できることが分かる.