\documentclass[landscape]{slides}
%\documentclass{seminar}
%\renewcommand{\printlandscape}{\special{landscape}}

\setlength{\topmargin}{-20mm}
\setlength{\oddsidemargin}{-7.5mm}
\setlength{\evensidemargin}{-7.5mm}
\setlength{\textheight}{175mm}
\setlength{\textwidth}{260mm}
%\setlength{\headheight}{0mm}
%\setlength{\headsep}{0mm}
\setlength{\parskip}{0mm}

%\renewcommand{\thefootnote}{\fnsymbol{footnote}}
%\renewcommand{\captionfont}{\footnotesize\sffamily}

\renewcommand{\thepage}{}
\pagestyle{empty}

\title{\huge アクセントを考慮した\\波形接続型単語音声合成}
\author{\Large 計算機工学講座\ \ 池原研究室\\022002\ \ 石田 隆浩}
\date{}

\begin{document}
\bf
\Large

\begin{slide}
\maketitle
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{研究の背景}}\end{center}
\vspace{-5mm}
\begin{center}
音声ガイダンスの作成\\
↓\\
\underline{録音編集方式}\\
{\normalsize(例)「目的地は東京駅です」＝「目的地は＿＿＿です」＋「東京駅」}\\
↓\\
同一話者による単語音声が大量に必要\\
↓\\
一部の単語のみ録音，残りは合成音声\\
↓\\
\underline{波形接続型単語音声合成}
\end{center}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{波形接続型単語音声合成}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item 下記情報の一致する素片を選択，接続して単語音声を作成
	\vspace{-10mm}
	\begin{itemize}
	\item 音素または音節
	\vspace{-10mm}
	\item 先行音素(前音素環境)
	\vspace{-10mm}
	\item 後続音素(後音素環境)
	\vspace{-10mm}
	\item 単語のモーラ数，モーラ位置
	\vspace{-10mm}
	\item (アクセント)
	\end{itemize}
\vspace{-20mm}
\item 話者の声質を反映→自然性の高い合成音声を作成可能
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{問題点}}\end{center}
\vspace{-15mm}
\begin{itemize}
\item 固有名詞(地名){\large[1]}/普通名詞{\large[2]}に対する一定の評価\\
		→普通名詞におけるアクセントの問題

\vspace{-10mm}
{\normalsize [1]村上，水澤，東田，``音節波形接続方式による単語音声合成''(信学論)}

\vspace{-15mm}
{\normalsize [2]石田，村上，池原，``音節波形接続型音声合成の普通名詞への応用''(信学技報)}

\item 素片単位や接続位置，素片選択手法\\
		→信号処理を行わないため，非常に重要

\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{研究の目的}}\end{center}
\vspace{-15mm}
\begin{itemize}
\item アクセントの問題\\
		→アクセントを考慮した素片選択%，未考慮の場合と比較

%		\underline{アクセントの有効性の確認}

\item 素片単位や接続位置\\
		→複数の条件下で合成音声を作成，比較

%		\underline{最適な素片単位，接続位置について検証}

\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{評価実験}}\end{center}
\vspace{-10mm}
\begin{center}
合成音声を作成\\
↓\\
聴覚実験
\vspace{-20mm}
\end{center}
\begin{itemize}
\item 自然音声と合成音声をランダムに被験者に提示
\vspace{-20mm}
\item 了解度試験とオピニオン評価の実施
	\vspace{-10mm}
	\begin{itemize}
	\item 了解度試験\\
			発話内容を仮名で書き取り→明瞭性を調査

	\vspace{-10mm}
	\item オピニオン評価\\
			音声の自然性を5段階評価
	\end{itemize}
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{実験環境}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item DB: ATR単語発話データベースAset(5,240単語)\\
		(話者…女性話者FTK，FYN)
\vspace{-20mm}
\item 被験者: 20代男性5名
\vspace{-20mm}
\item 評価対象: Asetに含まれる3，4モーラ語名詞各50音声
\vspace{-20mm}
\item 音声の種類
	\vspace{-15mm}
	\begin{itemize}
	\item Asetの音声(自然音声)
	\vspace{-15mm}
	\item 音節を単位とした波形接続型合成音声({\tt syl})
	\vspace{-15mm}
	\item 音素を単位とした波形接続型合成音声({\tt tri})
	\vspace{-15mm}
	\item 市販の合成機の合成音声(市販の音声)

	\vspace{-5mm}
	(※素片接続位置：音素境界/音素中心)
	\end{itemize}
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{結果(1): アクセントの有効性の調査}}\end{center}
\begin{center}
\large
\begin{tabular}{|c|c|c|c|c|c|c|}
\hline
& \multicolumn{3}{|c|}{了解度　正解率(％)} & \multicolumn{3}{|c|}{オピニオンスコア} \\
& \multicolumn{3}{|c|}{評価音節数: 1,750 } & \multicolumn{3}{|c|}{評価単語数: 100 } \\
\cline{2-7}
              & FTK  & FYN  & 平均 & FTK & FYN & 平均 \\ \hline
自然音声      & 99.7 & 99.9 & 99.8 & 4.8 & 4.9 & 4.9  \\ \hline
{\tt syl(ac{\bf 無})} & 99.4 & 99.7 & 99.6 & 3.8 & 4.1 & 4.0  \\ \hline
{\tt syl(ac{\bf 有})} & 99.4 & 99.7 & 99.6 & 4.2 & 4.4 & 4.3  \\ \hline
{\tt tri(ac{\bf 無})} & 98.2 & 99.3 & 98.8 & 3.4 & 4.0 & 3.7  \\ \hline
{\tt tri(ac{\bf 有})} & 99.1 & 99.5 & 99.3 & 4.0 & 4.2 & 4.1  \\ \hline
市販の音声    & 96.7 & 97.6 & 97.2 & 2.4 & 2.4 & 2.4  \\ \hline
\end{tabular}
\end{center}
\vspace{-15mm}
\hspace{120mm}{\large (※素片接続位置＝音素境界の場合)}

\vspace{-15mm}
\begin{itemize}
\item オピニオン評価で改善→アクセントの有効性を確認\\
		(音節単位: 4.0→4.3，音素単位: 3.7→4.1)
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{結果(2): 素片単位，接続位置での比較}}\end{center}
\begin{center}
\large
\begin{tabular}{|c|c|c|c|c|c|c|}
\hline
& \multicolumn{3}{|c|}{了解度　正解率(％)} & \multicolumn{3}{|c|}{オピニオンスコア} \\
& \multicolumn{3}{|c|}{評価音節数: 1,750 } & \multicolumn{3}{|c|}{評価単語数: 100} \\
\cline{2-7}
              & FTK  & FYN  & 平均 & FTK & FYN & 平均 \\ \hline
自然音声      & 99.7 & 99.9 & 99.8 & 4.8 & 4.9 & 4.9  \\ \hline
{\tt syl({\bf 境界})} & 99.4 & 99.7 & 99.6 & 4.2 & 4.4 & 4.3  \\ \hline
{\tt tri({\bf 境界})} & 99.1 & 99.5 & 99.3 & 4.0 & 4.2 & 4.1  \\ \hline
{\tt syl({\bf 中心})} & 99.0 & 99.7 & 99.4 & 3.6 & 4.0 & 3.8  \\ \hline
{\tt tri({\bf 中心})} & 98.2 & 99.1 & 98.7 & 3.4 & 3.8 & 3.6  \\ \hline
市販の音声    & 96.7 & 97.6 & 97.2 & 2.4 & 2.4 & 2.4  \\ \hline
\end{tabular}
\end{center}
\vspace{-15mm}
\hspace{145mm}{\large (※アクセント考慮の場合)}

\vspace{-15mm}
\begin{itemize}
\item 音節単位(99.6％, 4.3) ＞ 音素単位(99.3％, 4.1)
\vspace{-20mm}
\item 音素境界(99.6％, 4.3) ＞ 音素中心(99.4％, 3.8)
\end{itemize}
\end{slide}

%\begin{slide}
%\begin{center}{\huge \underline{考察}}\end{center}
%\vspace{-15mm}
%\begin{enumerate}
%\item 自然音声と合成音声の差
%\vspace{-20mm}
%\item 了解度試験の解析
%\vspace{-20mm}
%\item オピニオン評価の解析
%\vspace{-20mm}
%\item 素片単位について
%\vspace{-20mm}
%\item 素片接続位置について
%\end{enumerate}
%\end{slide}

\begin{slide}
\begin{center}{\huge \underline{考察(1): 自然音声と合成音声の差}}\end{center}
オピニオン評価基準

{\large
\vspace{-15mm}
\ \ 5: 自然音声

\vspace{-15mm}
\ \ 4: 音量正常，アクセント正常，接続部の違和感小

\vspace{-15mm}
\ \ 3: 音量正常，アクセント違和感小，接続部の違和感小

\vspace{-15mm}
\ \ 2: 音量違和感小，アクセント違和感中，接続部の違和感中

\vspace{-15mm}
\ \ 1: 音量違和感中〜大，アクセント違和感大，接続部の違和感大
}

\vspace{-15mm}
\begin{itemize}
\item 合成音声のスコアは4.3(音節単位)→接続部の違和感小
\vspace{-20mm}
\item 音節単位(4.3)＞音素単位(4.1)→音節の方が良い結果
\end{itemize}

\vspace{-5mm}
\ \ \underline{接続部が少ない方が違和感発生の可能性減→自然性向上}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{考察(2): 了解度試験の解析}}\end{center}
\vspace{-5mm}
%\begin{table}[htb]
\begin{center}
%\caption{了解度試験における間違いの例}\label{table.fault}
%\footnotesize
%\large
\begin{tabular}{|l|c|c|}
\hline
   & 正解 & 間違いの例 \\
\hline
f1 & 便利(べんり) & \hspace{-0.1mm}\underline{で}\hspace{-0.1mm}んり\\
f2 & 無断(むだん) & む\hspace{-0.1mm}\underline{ら}\hspace{-0.1mm}ん\\
f3 & 売店(ばいてん) & ばいて\hspace{-0.1mm}\underline{　} \\
f4 & 来年(らいねん) & ら\hspace{-0.1mm}\underline{え}\hspace{-0.1mm}ねん\\
f5 & 黒板(こくばん) & こ\hspace{-0.1mm}\underline{こ}\hspace{-0.1mm}ばん\\
\hline
\end{tabular}
\end{center}
%\end{table}
\vspace{-10mm}
\begin{itemize}
\item f1，f2: 子音の誤り([b]→[d]，[d]→[r])
\vspace{-20mm}
\item f3: 最終モーラの撥音の欠落
\vspace{-20mm}
\item f4，f5: 母音の誤り([i]→[e]，[u]→[o])
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{考察(3): オピニオン評価の解析}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item 音量に違和感のある音声\\
		(例)「かいわ」→「か\underline{い{\large わ}}」\\
		\hspace{100mm}＝「た\underline{い}わ」＋「{\large うち\underline{わ}}」

		\vspace{-5mm}
		\underline{音声コーパス作成時における音量調整の必要性}

\vspace{-15mm}
\item 各音素，音節の継続時間長の問題\\
		(例)「け\underline{っ}きょく」→「け\underline{{\small っ}}きょく」\\
		→2モーラ目の促音の継続時間が極端に短い

		\vspace{-5mm}
		\underline{継続時間長の制御の導入}
\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{考察(4): 素片単位について}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item 評価：音節単位＞音素単位\\
		→音節単位の場合，素片種類数：増，作成可能音声数：減\\
		(本手法では音素単位で650単語，音節単位で470単語)

		\vspace{-5mm}
		\underline{後音素環境における子音のグループ化}→素片種類数：減

\end{itemize}
\end{slide}

\begin{slide}
\begin{center}{\huge \underline{まとめ}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item アクセントの有効性を確認\\
		(オピニオンスコア: 4.0→4.3(音節単位))
\vspace{-20mm}
\item 素片単位は「音節＞音素」，接続位置は「境界＞中心」
\end{itemize}

\begin{center}{\huge \underline{今後の課題}}\end{center}
\vspace{-20mm}
\begin{itemize}
\item さらなる接続部の違和感の軽減を目指した制御の導入
\vspace{-20mm}
\item 後音素環境における子音のグループ化の検討
\end{itemize}
\end{slide}

\end{document}
