# NMT による複文翻訳における単文対訳学習文の利用

丸山京祐 ${ }^{1}$ 村上仁一 2
1 鳥取大学工学部電気情報系学科
2 鳥取大学工学部
${ }^{1}$ b19t2110u@edu.tottori-u.ac.jp
${ }^{2}$ murakami@tottori-u.ac.jp

## 概要

NMT を使った複文翻訳においては複文対訳文を 学習して翻訳する。しかし, 多くの複文対訳文を集 めることには限界がある．艺こで，複文対訳文だけ でなく, 単文対訳文を学習に使用することで複文翻訳の精度を向上させることを考えた .

本論文では，複文翻訳の学習文に複文対訳文だけ でなく，単文対訳文も同時に学習した結果を示す。

## 1 はじめに

NMT において翻訳する文と同じ分野の文を学習 することが望ましいとされている [1] . 光のため，複文翻訳においては複文対訳文を学習して翻訳す る.しかし, 多くの複文対訳文を集めることには限界がある。そとで，複文対訳文だけでなく単文対訳文を学習に使用することで複文翻訳の精度を上げ ることを考えた . 複文は単文の組み合わせの構造に なっている. ぞため, 単文の学習が翻訳の精度向上に影響すると考えている。

本論文では，NMT を使用して複文翻訳するとき の単文対訳文の量の影響を調査する。

## 2 提案手法

複文は複数の単文を組み合わせた構造になってい る. そのため，複文学習文に単文を追加することで 複文翻訳の精度向上ができると考えた。

本研究では，以下の手法を提案する。

1. 複文対訳学習文と単文対訳学習文を合わせた コーパスを作成

2. 作成したコーパスを NMT で学習

3. 学習した NMT で複文テスト文を翻訳

## 3 実験

本実験では，OpenNMT-py[2]を用いて翻訳実験を 行う.

NMT に複文対訳学習文 9 万文のみを学習したモ デルと半分の 4 万 6 千文のみ学習したモデルを作成 し複文テスト文を翻訳する。光して，光れ光れの複文対訳学習文に単文対訳学習文を 2 万文，4万文， 8 万文，16万文を加えてモデルを作成し，光れ光れの モデルで複文テスト文を翻訳する。

## 3.1 実験データ

実験には，電子辞書などの例文より抽出したコー パス [3]を用いる.使用するデータの内訳を表 1 に 示す.

表 1 実験データ

表 2 に単文対訳学習文の例文を示す. 表 3 に複文対訳学習文の例文を示す. 表 4 に複文テスト文の例文を示す.

表 2 単文対訳学習文の例文

 \\

表 3 複文対訳学習文の例文

 &  \\

表 4 複文テスト文の例文

その国はこの戦いを前から予知して光れ に備えてきた。

彼らは、わがXYZ 社への訪問中、当社が 完全にオープンで協力的であつたことに同意するでしょう。

## 4 実験結果

## 4.1 自動評価結果

複文のテスト文 9243 文の翻訳結果の出力文に対 して自動評価指標 BLEU[4]による自動評価を行っ た. 表 5 に複文 9 万文に単文を加えた学習の自動評価結果を示す. 表 6 に複文 4 万 6 千文に単文を加え た学習の自動評価結果を示す.

表 5 複文 9 万文に単文を加えた学習の自動評価結果

表 6 複文 4 万 6 千文に単文を加えた学習の自動評価結果

表 5,6 より, 複文に単文を加えるほど精度は向上していくことがわかる.

## 4.2 出力結果の例文

複文対訳学習文 9 万文に単文対訳学習文を加えて 学習する実験の出力結果の例文を示す. 表 7 に翻訳精度が向上した例文を示す. 表 8 に翻訳精度が低下 した例文を示す。表 7 翻訳精度が向上した例

 \\

表 8 翻訳精度が低下した例

 \\

## 4.3 人手評価結果

複文テスト文 9243 文を翻訳した結果から 100 文 を抽出し，人手による対比較評価を行った . 評価者

は著者 1 名である. 表 9 に複文対訳学習文 9 万文の みの結果と学習文に単文対訳学習文 16 万文を加え た結果を比較した結果を示す。

表 9 複文 9 万文, 複文 9 万文 + 単文 16 万文の対比較評価

表 9 から，複文 9 万文のみの結果より単文 16 万文を加えた結果の方が良い結果となっていることが 示された。

## 4.4 実験のまとめ

実験結果より，複文対訳学習文に単文対訳学習文 を多く加えて学習するほど複文翻訳の精度が向上す ることがわかる .

## 5 考察

5.1 学習文が単文対訳学習文のみの複文翻訳の精度

複文対訳学習文の必要性を確認するため，単文対訳学習文のみを学習した場合の複文翻訳の精度を示 す.

## 5.1.1 出力結果の例文

学習文が単文対訳学習文のみの出力結果の例文を 表 10 に示す.

表 10 単文対訳学習文のみの出力例

 \\

## 5.1.2 自動評価結果

複文のテスト文 9243 文を入力文として翻訳実験 を行い, 出力文に対して自動評価指標 BLEU による 自動評価を行った。

表 11 単文対訳学習文のみの自動評価結果

表 11 より, 単文対訳学習文のみでは複文翻訳の 精度がかなり低いことがわかる. 表 5,6 の結果と 比較すると，複文対訳学習文の量が単文対訳学習文 よりも精度に対する影響が大きいことがわかる．

## 5.2 BLEU 値の考察

複文対訳学習文のみの学習の結果と単文対訳学習文を加えた結果において，自動評価の有用性を調へ る.光のために，BLEU 値の近い複文対訳学習文 9 万文の結果と複文対訳学習文 4 万 6 千文に単文対訳学習文 8 万文を加えた結果を人手で比較する。

## 5.2.1 出力結果の例文

複文対訳学習文 9 万文の結果と複文対訳学習文 4 万 6 千文に単文対訳学習文 8 万文を加えて実験した ときの出力結果の例文を示す. 複文対訳学習文 9 万文の結果が良い例を表 12 に示す.また，複文対訳学習文 4 万 6 千文に単文 8 万文を加えた結果が良い 例を表 13 に示す。

表 12 複文対訳学習文 9 万文の結果が良い例

 \\

表 13 複文対訳学習文 4 万 6 千文 + 単文 8 万文の結果が 良い例

 \\

## 5.2.2 人手評価結果

複文テスト文 9243 文を翻訳した結果から 100 文 を抽出し，人手による対比較評価を行った. 評価者 は著者 1 名である.表 14 に複文対訳学習文 9 万文 のみの結果と複文対訳学習文 4 万 6 千文に単文対訳学習文 8 万文を加えた結果を対比較評価した結果を 示す.

表 14 複文 9 万文, 複文 4 万 6 千文 + 単文 8 万文の対比較
評価

表 14 から, 人手評価では複文 9 万文のみの結果 の方が少し良い結果となっていることがわかる．表 12の1つ目に示す例文のように出力単語は良く見え る.しかし，文全体では意味がおかしい．このよう な出力結果が複文 4 万 6 千文 + 単文 8 万文では比較的多く見られた．このことが自動評価と人手評価の 結果の違いになっていると考えられる。

## 6 おわりに

本研究では，NMT による複文翻訳において複文対訳学習文と単文対訳学習文光れ光れを学習した翻訳と複文対訳学習文に単文対訳学習文を加えて学習 し翻訳をした。

光の結果，複文翻訳において以下のことがわ
かった

・複文対訳学習文に単文対訳学習文を加えること で翻訳精度が向上する

・複文対訳学習文の量は単文対訳学習文よりもさ らに翻訳精度に大きく影響する

・複文対訳学習文のみと単文対訳学習文を加えた 学習文の比較において, 単語よりも文全体の意味か間違うことが比較的多くなるので, 自動評価が参考になりにくい

今後の研究では, 本研究で使用した NMT のモデ ルとは異なる翻訳モデルについての調査を行う．

## 参考文献

[1] Rui Wang, Masao Utiyama, Andrew Finch, Lemao Liu, Kehai Chen, and Eiichiro Sumita. Sentence selection and weighting for neural machine translation domain adaptation. IEEE/ACM Transactions on Audio, Speech, and Language Processing, Vol. 26, No. 10, pp. 1727-1741, 2018.

[2] Opennmt - open-source neural machine translation, 2017. https://opennmt.net/.

[3] 村上仁一. 日英対訳データベースの作成のための 1 考察. 言語処理学会第 17 回年次大会発表論文集, D4-5, pp. 979-82, 2011.

[4] Kishore Papineni, Salim Roukos, Todd Ward, and Wei-Jing Zhu. Bleu: a method for automatic evaluation of machine translation. In Proceedings of the 40th annual meeting of the Association for Computational Linguistics, pp. 311-318, 2002.
 丸山京祐 ${ }^{1}$ 村上仁一 2 1 鳥取大学工学部電気情報系学科 2 鳥取大学工学部 ${ }^{1}$ b19t2110u@edu.tottori-u.ac.jp ${ }^{2}$ murakami@tottori-u.ac.jp  