実験結果

鳥バンクの重文複文コーパスからランダムに50文抽出し，自動作成パターンと人手作成パターン(単語レベル)で対比較評価を行った．なお，2つの日本語変更文を比べ，参照文の語順により近づいた方を優れていると判断した．対比較評価の結果を表6.32に示す．

表: 対比較評価結果

自動作成パターン	人手作成パターン	差なし	同一出力
19	4	13	14

自動作成パターンの方が優れている例を表6.33，人手作成パターンの方が優れている例を表6.34に示す．

表: 自動作成パターンの方が優れている例

例1
入力文	わたし は 食事 の マナー を 知ら なかっ た ので 赤恥 を
	かい た 。
参照文	I was humiliated for having no knowledge of table manners.
日本語パターン(自動)	X1 は X2 の X3 を X4 なかっ た ので X5 た 。
日本語変更文(自動)	わたし は 赤恥 を かい た 知ら なかっ た ので 食事 の
	マナー を 。
日本語パターン(人手)	X1 は X2 の X3 を X4 なかっ た ので 赤恥 を かい た 。
日本語変更文(人手)	わたし は 知ら なかっ た ので 赤恥 を かい た 食事 の
	マナー を 。
例2
入力文	詩 を 味わう ため に は 声 を 出し て 読む べき だ 。
参照文	In order to appreciate a poem, you should read it aloud.
日本語パターン(自動)	X1 を X2 ため に は X3 を 出し て X4 べき だ 。
日本語変更文(自動)	味わう ため に は 詩 を 読む べき だ 声 を 出し て 。
日本語パターン(人手)	X1 を X2 ため に は 声 を 出し て X3 べき だ 。
日本語変更文(人手)	味わう ため に は 声 を 出し て 詩 を 読む べき だ 。
例3
入力文	この 本 は ロシア の 民話 を 集め た もの です 。
参照文	This is a collection of Russian folktales.
日本語パターン(自動)	X1 本 は X2 の X3 を X4 た もの です 。
日本語変更文(自動)	この 本 は 集め た もの です ロシア の 民話 を 。
日本語パターン(人手)	X1 本 は X2 の X3 を 集め た もの です 。
日本語変更文(人手)	この 本 は ロシア の 民話 を 集め た もの です 。

表: 人手作成パターンの方が優れている例

例1
入力文	会社 に いる 間 は 愛想 よく する よう に し て いる 。
参照文	I try to make myself agreeable while in the office.
日本語パターン(自動)	X1 に いる 間 は 愛想 よく する よう に し て いる 。
日本語変更文(自動)	会社 に いる 間 は 愛想 よく する よう に し て いる 。
日本語パターン(人手)	X1 に いる X2 は 愛想 X3 X4 よう に X5 て いる 。
日本語変更文(人手)	し て いる する よう に 愛想 よく 間 は 会社 に いる 。
例2
入力文	これ は 人々 に 愛唱 さ れ て いる 古い 民謡 の 一つ です 。
参照文	This is one of the old folk songs people love to sing.
日本語パターン(自動)	X1 は X2 に X3 れ て X4 X5 X6 の X7 です 。
日本語変更文(自動)	これ は いる 一つ です 古い 民謡 の 人々 に 愛唱 さ れ て 。
日本語パターン(人手)	X1 は X2 に X3 れ て いる X4 X5 の X6 です 。
日本語変更文(人手)	これ は 一つ です 古い 民謡 の 人々 に 愛唱 さ れ て いる 。
例3
入力文	彼 は 青信号 に なる と アクセル を ぐいと 踏み込ん だ 。
参照文	He stomped on the gas pedal when the green light came on.
日本語パターン(自動)	X1 は 青信号 に なる と X2 を ぐいと 踏み込ん だ 。
日本語変更文(自動)	彼 は 青信号 に なる と アクセル を ぐいと 踏み込ん だ 。
日本語パターン(人手)	X1 は X2 に なる と X3 を ぐいと 踏み込ん だ 。
日本語変更文(人手)	彼 は アクセル を ぐいと 踏み込ん だ 青信号 に なる と 。