過去の発話を含まない学習データの多様性評価

入力に過去の発話を含まないデータで学習したモデルにおける， テスト出力結果の多様性評価を表6.4.1に示す． また，各手法の○評価においての出力と出力数詳細を表6.4.2から表6.4.6に示す．

表 6.4.1: 多様性評価結果(入力に過去の発話を含まない)

手法	○評価数	△評価数	○出力種類数	△出力種類数
低頻度語置き換え無し	62	91	34	31
低頻度語全てをヌルトークン化	76	86	39	25
Copyable Model	69	82	38	22
品詞置き換え	60	103	30	32
提案手法	72	89	42	25

表 6.4.2: 低頻度語置き換え無し(入力に過去の発話を含まない)

出力数	応答
26	うん
2	海 に 行き ませ ん か ?
2	ねー
2	そう な ん です か
1	僕 も 大好き です
1	美味しい です ね
1	行き たい
1	気持ち が いい です ね
1	気 を つけ て ください
1	楽しい です ね
1	確か に ね
1	何 が 好き です か ?
1	一人 で 行く の です
1	ほんと ?
1	ほんと
1	へえー
1	はい
1	どういたしまして
1	そうですね
1	そうそう そうそう
1	そう な ん です か ?
1	そう な ん だ
1	そう そう そう そう
1	そう
1	かわいい
1	ええ
1	うん
1	いい です ね
1	ありがとう
1	あっ そう
1	ああ そう です か
1	ああ そう
1	あ そう
1	いい ?

表 6.4.3: 低頻度語全てをヌルトークン化(入力に過去の発話を含まない)

出力数	応答
28	うん
5	あ そう な ん だ
4	そうですね
3	そう な ん だ
2	そう な ん です か
1	和食 が 好き です ね
1	予防 が 大切 です ね
1	味 が いい です ね
1	湘南 は 楽しい です ね
1	私 も 好き です
1	嫌い です
1	気持ち が いい です ね
1	楽しい です ね
1	海 に 行き ませ ん か ?
1	何 ?
1	穏やか だ ね
1	一人 で 行く の です
1	ベスト が いい です ね
1	スポーツ は 得意 です か ?
1	ほんと ?
1	へえー
1	はい
1	どういたしまして
1	そうですね
1	そうそう そうそう
1	そう そうそう
1	そう
1	かわいい ね
1	おいしい
1	ええ
1	え ?
1	うそ ー
1	いき たい
1	いい なー
1	いい です ね
1	ありがとう
1	あ ほんと
1	あ そう な ん です か
1	そうですね

表 6.4.4: Copyable Model(入力に過去の発話を含まない)

出力数	応答
27	うん
5	そうですね
2	あ そう な ん だ
1	麦茶 が 欲しい です ね
1	川 は 楽しい です ね
1	湘南 は 楽しい です ね
1	行き たい
1	好き です か ?
1	気持ち が いい です ね
1	楽しい です ね
1	海 に 行き たい です ね
1	何 を ?
1	何 ?
1	一人 で 行く の です
1	スポーツ は 好き です か ?
1	ほんと ?
1	はあ
1	どういたしまして
1	そうそう そうそう
1	そう な ん だ
1	そう な の です か ?
1	そう だ ね
1	そう
1	おいしい
1	ええ
1	うーん
1	いや
1	いい よ
1	いい です ね
1	いい です ね
1	ありがとう
1	あっ そう
1	あ 本当 ?
1	あ ほんと
1	あ そう
1	$unk_{1}$ は いい です ね
1	$unk_{1}$ ?
1	$unk_{1}$ が 多い です

表 6.4.5: 品詞置き換え(入力に過去の発話を含まない)

出力数	応答
24	うん
5	そうですね
3	そう な ん だ
2	そうそう そうそう
1	私 も 好き です
1	気持ち が いい です ね
1	気 を つけ て ください
1	楽しい です ね
1	海 は 楽しい です ね
1	音楽 は 好き です ね
1	一人 で 行く の です
1	テレビ は 好き です か ?
1	わかん ない
1	ほんと
1	なんで ?
1	どういたしまして
1	そう な ん です か ?
1	そう な ん です か
1	そう な の です か
1	そう だ ね
1	そう そうそう
1	かわいい ね
1	うんうん
1	いい です ね
1	あっ た ?
1	あ そう な ん だ
1	あ そう な の ?
1	あ そう です か
1	あ そう
1	そう だ よ ね

表 6.4.6: 提案手法(入力に過去の発話を含まない)

出力数	応答
23	うん
2	そうですね
2	そうそう そうそう
2	そう な ん だ
2	そう です か
2	うん ?
2	あっ そう
2	あ ほんと
2	あ そう です か
1	予防 が 大切 です ね
1	川 は 楽しい です ね
1	食べ ない
1	松たか子 さん も 好き です か ?
1	行き たい
1	汗 で 水分 が 出 ます よ ねー
1	楽しい です ね
1	海 に 行き ませ ん か ?
1	何 が 好き です か ?
1	何 が ?
1	塩 が 好き な ん です か ?
1	一人 で 行く の です
1	ベスト が いい です ね
1	やっ て た
1	ほんと ?
1	はい
1	なんで ?
1	どういたしまして
1	そうそう
1	そう な ん です か
1	そう です よ ね
1	そう だ ね
1	おいしい です ね
1	え ?
1	いや
1	いき た ー い
1	いい です ね
1	ありがとう
1	ありがとう
1	あ そう
1	$unk_{1}$ は 好き です ね
1	$unk_{1}$ は 好き です か ?
1	何で ?