評価の分類

次に，評価する基準を4つ説明する．

◎

…出力文において，正解文と同じ前置詞が存在したもの

[

c]◎の例 入力文：学生がバスで学校に行く。
任意格要素：バスで
前置詞句候補：by Nk, in Nk, on Nk, …
出力文：Students go to school by bus
正解文：A student goes to school by bus.

○

…◎以外で，出力文の候補において，正解の前置詞が存在したもの

[

c]○の例 入力文：学生がバスで学校に行く。
任意格要素：バスで
前置詞句候補：by Nk, in Nk, on Nk, …
出力文：Students go to school on bus
正解文：A student goes to school by bus.

△

…入力文の任意格要素に対して，格要素パターンが適合したが，正 解の前置詞句パターンが出力文候補に含まれていないもの

[

c]△の例 入力文：学生がバスで学校に行く。
任意格要素：バスで
前置詞句候補：with Nk, in Nk, on Nk, …
出力文：Students go to school on bus
正解文：A student goes to school by bus.

×

…入力文の任意格要素に対して，格要素パターンが使われていない もの

[

c]×の例 入力文：学生がバスで学校に行く。
任意格要素：バスで
前置詞句候補：なし
出力文：Students go to school
正解文：A student goes to school by bus.