next up previous contents
Next: 各手法における多様性の増減 Up: ○,△評価における多様性 Previous: 過去の発話を含まない学習データの過去の発話を用いた多様性評価   目次

過去の発話を含む学習データの出力結果評価

入力に過去の発話を含んだデータで学習したモデルにおける, テスト出力結果の多様性評価を表6.3.8に示す. また,各手法の○評価においての出力と出力数詳細を表6.4.14から表6.4.18に示す. 表内の[A]は人名(固有名詞)を記号へ置き換えたものである.


表 6.4.13: 多様性評価結果(入力に過去の発話を含む)
手法 ○評価数 △評価数 ○出力種類数 △出力種類数
低頻度語置き換え無し 54 86 31 44
低頻度語全てをヌルトークン化 63 77 30 24
Copyable Model 65 75 27 20
品詞置き換え 58 92 37 29
提案手法 68 83 35 27


表 6.4.14: 低頻度語置き換え無し(入力に過去の発話を含む)
出力数 応答
20 うん
3 そう な ん だ
2 なんで ?
2 そう な ん です か
1 美味しい です ね
1 私 も 好き です
1 気持ち が いい です ね
1 海 に 行き たい です ね
1 一人 で 行っ て ない です
1 サーフィン は 楽しい です ね
1 ほんと ー
1 はい
1 どんな 仕事 が 好き です か ?
1 そうですね
1 そうそう そうそう
1 そうそう
1 そう な ん です か
? 1 そう な の ?
1 そう です か
1 そう そうそう
1 そう
1 かわいい ね
1 うんうん
1 うん そう そうそう
1 うん うん うん うん
1 うそ ー
1 いい です ねー
1 いい じゃん
1 あっ ほんと ?
1 あっ そう な ん だ
1 あ うそ ー
表 6.4.15: 低頻度語全てをヌルトークン化(入力に過去の発話を含む)
出力数 応答
28 うん
5 そうですね
2 ほんと ?
2 そう な ん だ
1 味 が いい です ね
1 怖い よ ねー
1 私 も 大好き です
1 行こ う
1 楽しい です ね
1 海 に 行き たい です ね
1 サーフィン は 楽しい です ね
1 わかん ない
1 はい
1 なんで ?
1 どういたしまして
1 それ は 分かり ませ ん
1 それ は そう な ん だ
1 そう 思い ます
1 そう な ん だ そう です よ ね
1 そう です か
1 そう そうそう
1 え ?
1 いただき まーす
1 いい です ね
1 いい じゃん
1 あ ほんと
1 あ そう な ん だ
1 あ そう
1 [A] ちゃん の やつ ?
1 あ そう な の


表 6.4.16: Copyable Model(入力に過去の発話を含む)
出力数 応答
29 うん
5 そうですね
2 気持ち が いい です ね
2 海 は 楽しい です ね
2 そう です か
2 そう だ よ ね
2 あ そう な ん だ
2 $unk_{1}$ が 多い です ね
1 大丈夫
1 楽しい よ
1 わかん ない
1 まじ で ?
1 なんで ?
1 なんで ?
1 なるほど
1 そうそう そうそう
1 そう な ん です か
1 そう な の ?
1 そう です か ?
1 そう だ ね
1 え ?
1 いい よ ね
1 いい の ?
1 あっ た
1 あ そう
1 $unk_{1}$ は 好き です ね
1 $unk_{1}$ が 多い です ね
表 6.4.17: 品詞置き換え(入力に過去の発話を含む)
出力数 応答
17 うん
5 そうですね
2 私 も 好き です
1 味 が 好き です ね
1 朝 から 海 に 行き ます か ?
1 知ら ない
1 行こ う
1 気持ち が いい です ね
1 楽しい よ
1 何 が ?
1 何 ?
1 まじ で ?
1 なんで ?
1 なるほど
1 そんな こと ない
1 それ は ない よ ね
1 そうですね
1 そうそう そうそう
1 そう な ん です よ
1 そう な ん だ よ ね
1 そう な ん だ
1 そう です ね
1 そう です か
1 そう だ ね
1 そう
1 かわいい ね
1 お酒 は 美味しい です ね
1 ええ
1 ううん
1 いい よ
1 あっ そう な ん だ
1 あっ そう な の
1 あー そっか そっか
1 あ ほんと
1 あ そう な ん です か
1 [A] さん
1 そう です か


表 6.4.18: 提案手法(入力に過去の発話を含む)
出力数 応答
27 うん
3 そうですね
3 そう な ん だ
2 確か に
2 何 ?
2 そうそう そうそう
1 怖い ねー
1 微妙 だ よ
1 楽しい よ
1 海 に 行き たい です ね
1 一人 で 行く の です
1 サーフィン は 楽しい です ね
1 なんで ?
1 どんな 料理 が 好き です か ?
1 そう な ん です か ?
1 そう です か
1 そう だ ねー
1 そう だ ね
1 そう そうそう そうそう
1 これ も いい
1 ええ
1 うん
1 うーん そう です よ ね
1 いい よ
1 いい です ね
1 あっ た
1 あっ そう な ん だ
1 ああ そう な ん だ
1 あー そう な ん だ
1 あ 本当 ?
1 あ 本当
1 あ そう な ん です か
1 $unk_{1}$ は 美味しい です ね
1 $unk_{1}$ が 多い です ね
1 $unk_{1}$ が 多い です ね


next up previous contents
Next: 各手法における多様性の増減 Up: ○,△評価における多様性 Previous: 過去の発話を含まない学習データの過去の発話を用いた多様性評価   目次
2018-02-28