Next: デコーダ内とデコーダ外の未知語処理の差
Up: 考察
Previous: 翻訳確率最尤の単語選択の効果
目次
本研究では,対訳単語辞書を用いて未知語処理を行った.しかし,自動的に作成した対訳句辞書を用いて未知語処理を行うことも考えられる.具体的には,1変数の単語レベル文パターン辞書を元に対訳句辞書と対訳句レベル文パターン辞書をループ処理で作成し,最後に作成した対訳句辞書を未知語処理に用いる方法である.ループ処理の流れを図7.2に示す.ここで,図中の``単語パターン"は対訳単語レベル文パターン辞書を指し,``句パターン"は対訳句レベル文パターン辞書を指す.
また,1変数の単語レベル文パターン辞書は343,566パターン存在しており,このパターンを使用して作成された句の数は4,308句だった.この句の精度調査結果を表7.14に示す.表中の``△"は,意味が欠落または不必要な意味が付与されていることを意味する.
表 7.14:
1変数の単語レベル文パターンから作成した対訳句の精度
|
表7.14より,1変数の対訳単語レベル文パターン辞書から作成した対訳句は精度が高いことが分かる.この対訳句辞書から対訳句レベル文パターン辞書をループ処理で作成した結果を表に示す.また,ループ処理で作成した対訳句の精度調査結果を表7.16に示す.
表 7.15:
対訳句と1変数の句レベル文パターンの数
|
表 7.16:
ループ処理で作成した対訳句の精度(100句中)
|
また,表7.16におけるループ数が1の場合の評価例を表7.17に,ループ数が2の場合の評価例を表7.18に,ループ数が8の場合の評価例を表7.19に示す.
s122019
2018-02-15