人手評価結果

人手評価ではベースラインと提案手法の出力文から，それぞれランダムに抽出した100文を用いる．100文に対して正確性に基づき，人手による対比較評価を行う．評価の基準を以下に示す．評価結果を表7.4に示す．

Table 7.4: ベースラインVS提案手法における判断基準

Table 7.5: ベースラインVS提案手法の対比較評価結果(100文中)

表7.5の結果より，人手評価において，提案手法による翻訳精度の向上が確認できた．

ベースラインVS提案手法における， 提案手法○の出力例を表7.6〜表7.8， ベースライン○の出力例を表7.9〜表7.11， 差なしの場合の出力例を表7.12〜表7.14に示す．

1. 提案手法○の出力例

   表7.6において，入力文の``貿易国''に対する出力が提案手法では``country of trade''と比較的正しい 訳が得られている．ベースラインでは``American country''となり誤った訳が生成されている．

   
   

   Table 7.6: 提案手法○の出力例1
   
   

   表7.7において， 入力文の``旅行の申し込みを受け付けています''に対する出力が提案手法では``receiving applications for the trip''と比較的正しい訳が得られている．ベースラインでは``content with my trip''となり誤った訳が生成されている．

   
   

   Table 7.7: 提案手法○の出力例2
   
   

   表7.8において， 入力文の``台所用品''に対する出力が提案手法では``kitchen goods''と比較的正しい 訳が得られている．ベースラインでは``kitchen modes''となり誤った訳が生成されている．

   
   

   Table 7.8: 提案手法○の出力例3
   
   

2. ベースライン○の出力例

   表7.9において，入力文の``苦味がある''に対する出力が提案手法では``tastes sweet ''と誤った訳になっている．ベースラインでは，`` tastes bitter''と入力の意味により近い訳が得られている．
   

   Table 7.9: ベースライン○の出力例1
   
   

   表7.10において， 提案手法では入力文中の``飢饉の年''を正しく翻訳できていない．ベースラインでは全体として比較的正しい翻訳となっている．
   

   Table 7.10: ベースライン○の出力例2
   
   

   表7.11において， 入力文の``救出された''に対する出力が提案手法では`` were displaced''と誤った訳になっている．ベースラインでは，`` were saved''と入力の意味により近い訳が得られている．
   

   Table 7.11: ベースライン○の出力例3
   
   

3. 差なしの出力例

   表7.12において，入力文の``時計''が提案手法では``watch''と訳され,ベースラインでは``clock''と訳されている違いがあるが,文全体の翻訳精度に差はないと考えられる.

   
   

   Table 7.12: 差なしの出力例1
   
   

   表7.13において， 提案手法とベースラインでは同一の出力が得られている．よってこれらを差なしとしている．

   
   

   Table 7.13: 差なしの出力例2
   
   

   表7.14において， 提案手法では``に落ち着いた''に対する出力``settled themselves in''が得られ，ベースラインでは``settled into''が得られているが，どちらも同程度に正確であると考えたため，差なしとしている．

   
   

   Table 7.14: 差なしの出力例3