next up previous contents
次へ: 収集した感動を与える文の分析 上へ: 感動を与える文の収集 戻る: 教師あり機械学習による感動を与える文の収集   目次

カッパ係数による正例と負例の評価

カッパ係数を用いて,収集した正例と負例の一致率を算出した.カッパ係数の算出は[*]節で述べた方法を用いる.

正例と負例の評価は被験者A(1名)が行った.被験者A(1名)の評価した正例20個と負例20個を,被験者Aとは別の被験者3名により,評価させた.

被験者3名の多数決の結果と被験者Aの判定結果を比較すると,カッパ係数0.58を得た.中程度の一致であった.



eki takashi 平成24年3月13日