next up previous contents
Next: 表の記載欠落箇所のみに対して検索エンジンを用いた情報抽出 Up: 実験結果 Previous: 実験結果   目次

表の全ての箇所に対して検索エンジンを用いた情報抽出

提案手法の[*]節より,Wikipedia(2014年11月)の城ページ(2,665ページ)を対象として,そのうちランダムに選んだ30件の城名を検索エンジンにそれぞれ入力する. 検索エンジンより取得したWeb文書を用いて固有表現抽出に基づく手法と上位下位知識に基づく手法により表を作成する.

固有表現抽出に基づく手法を用いて得られた結果の例を表[*]に示す. 表において太字で記載してあるものは正解と判断したものである. 検索エンジンにより取得した記事50件の中で単語が出現した記事の数が多い上位5つの単語をそれぞれの重要項目に対し出力している. また抽出した表の正解率を1位正解率,5位正解率,MRRで評価した結果を表[*]に示す. 提案手法の[*]節により選定した重要項目全てで正解率を求めた結果を表[*]に示す.

上位下位知識に基づく手法を用いて得られた結果の例を表[*]に示す. 表において太字で記載してあるものは正解と判断したものである. 検索エンジンにより取得した記事50件の中で単語が出現した記事の数が多い上位5つの単語をそれぞれの重要項目に対し出力している. また抽出した表の正解率を1位正解率,5位正解率,MRRで評価した結果を表[*]に示す. 提案手法の[*]節により選定した重要項目全てで正解率を求めた結果を表[*]に示す.

クラスタリングに基づく手法を用いて得られた結果の例を表[*]に示す. 表において太字で記載してあるものは正解と判断したものである. 検索エンジンにより取得した記事50件の中で単語が出現した記事の数が多い上位5つの単語をそれぞれの重要項目に対し出力している. また抽出した表の正解率を1位正解率,5位正解率,MRRで評価した結果を表[*]に示す. 提案手法の[*]節により選定した重要項目全てで正解率を求めた結果を表[*]に示す.

また,固有表現抽出に基づく手法と上位下位知識に基づく手法とクラスタリングに基づく手法の3つ全ての重要項目に対して正解率を求めた結果を表[*]に示す.

なお,表[*]から表[*]で求めた正解率は,単にWeb文書からの情報抽出の性能を見るために行った評価実験である.


表: 固有表現抽出に基づく手法による情報抽出の結果
地名 人名 組織名
宇和島城 宇和島 藤堂高虎 宇和島城
日本 伊達 MS
宇和島城 桑折 朝日新聞
宇和島市 藤兵衛 宇和島市観光協会
愛媛県 高虎 二ノ丸
筑後十五城 龍造寺 蒲池 龍造寺軍
九州 大友 南朝
龍造寺隆信 筑後 鎮実
筑後 隆信 龍造寺家
肥前 龍造寺隆信 中日
岡崎城 岡崎 岡崎 名鉄
岡崎城 家康 備前曲輪
日本 徳川家康 能楽堂
岡崎市 岡崎城 岡崎城
愛知 三河武士 ブリタニカ国際大百科事典小項目事典
桜尾城 桜尾城 大内 桜尾城
尾城 桂元澄 サイトに埋め込む桜尾城
日本 毛利 毛利軍
桜尾 毛利元就 中日
築城 桜尾城 篠尾城
リンダーホーフ城 ドイツ 城内 宿泊ホテル申込最大人数名予約期限ツアー
ミュンヘン ワーグナー 中日
ルイ ファミリーマート
日本 城内リンダーホーフ シンデレラ城
バイエルン ルイ世 サークルKサンクス
小田原城 小田原 北条 小田原城
小田原城 小田原 日立
日本 豊臣秀吉 新越
小田原市 大久保 日経
神奈川県 北条氏政 韮山
川田城 武田 北条軍
日本 川田 薬師堂
川田 山城 川島入道川田雅楽助
天正 川田まみ 武田軍
舘林 北条 朝日
長森城 岐阜 土岐 切通陣屋
岐阜市 長森城 切通観音
切通 長森 美濃国守護職
日本 美濃 岐阜城
長森城 加納 長森西小学校
石神井城 石神井 豊島 三宝寺池
石神井城 道灌 平塚
石神井公園 長尾景春 氷川神社
日本 太田道灌 泰経
石神井公園駅 景春 石神井城


表: 上位下位知識に基づく手法による情報抽出の結果
県名 時代 地名 元号
宇和島城 福井県 江戸時代 石垣 文化
長野県 戦国時代 四国 慶長
静岡県 安土桃山時代 城山 明治
香川県 現代 名城 昭和
愛知県 戦前 大洲 寛文
築後十五城 福岡県 戦国時代 田尻 天皇
佐賀県 南北朝時代 山下 文化
大分県 江戸時代 毛利 天正
三潴県 室町時代 天皇 平成
熊本県 現代 河崎 天文
岡崎城 愛知県 江戸時代 愛知 平成
静岡県 戦国時代 平成 文化
長野県 安土桃山時代 名城 昭和
新潟県 現代 城内 明治
岐阜県 室町時代 城下 天正
桜尾城 山口県 戦国時代 毛利 天文
島根県 室町時代 藤原 承久
新潟県 江戸時代 鎌倉 文化
鳥取県 現代 室町 慶長
大分県 南北朝時代 本町 天正
リンダーホーフ城 新潟県 現代 中央 普通
福岡県 城内 文化
静岡県 東京 平成
神奈川県 駅前 天皇
ムジンバ カナ 大統
小田原城 神奈川県 江戸時代 北条 平成
葉県 戦国時代 石垣 文化
千葉県 現代 箱根 明治
静岡県 室町時代 平成 天正
茨城県 安土桃山時代 城内 昭和
川田城 長野県 戦国時代 田町 天正
愛知県 江戸時代 北条 文化
岐阜県 南北朝時代 愛知 天文
茨城県 室町時代 城内 長久
山梨県 現代 東京 平成
長森城 岐阜県 江戸時代 中山 明治
笠松県 南北朝時代 千石 文和
愛知県 戦国時代 渋谷 文治
静岡県 現代 鎌倉 享和
新潟県 戦前 愛知 文化
石神井城 神奈川県 室町時代 東京 文明
葉県 戦国時代 鎌倉 文化
千葉県 江戸時代 江古田 昭和
島根県 南北朝時代 室町 応永
新潟県 現代 沼袋 明治


表: クラスタリングに基づく手法による情報抽出の結果
クラスタ401(戦い状況) クラスタ407(城の造り) クラスタ765(交通関係)
宇和島城 開城 本丸 交通
攻める 長屋門 海道
落城 移築 街道
直ぐ 御殿 瀬戸内
出撃 門跡 北陸
筑後十五城 大敗 役所 海道
抵抗 本丸 交通
出陣 二ノ 連絡
落城 政庁 結ぶ
奮戦 御殿 街道
岡崎城 出陣 本丸 交通
破っ 二の丸 海道
戻り 大手門 東海道
大敗 御殿 北陸
防戦 役所 便利
桜尾城 落城 本丸 瀬戸内
開城 二の丸 参詣
出陣 日出 山陽
占拠 役所 交通
戻り 御門 便利
リンダーホーフ城 戻り 移築 交通
放火 日出 街道
直ぐ 便利
少数 海道
ロマンティック
小田原城 開城 本丸 海道
落城 二の丸 東海道
退け 正門 交通
戻り 御殿 幹線
撤退 蓮池 北陸
川田城 落城 本丸 街道
迫り 二の丸 交通
落ち延びる 御殿 要衝
明け渡し 役所 便利
伏兵 番所 交差
長森城 落城 本丸 交通
出陣 二の丸 海道
攻める 御殿 中山道
開城 大門 北陸
撤退 役所 便利
石神井城 落城 本丸 連絡
敗走 長屋門 便利
放火 役所 交通
戻り 二の丸 海道
大敗 大門 街道


表: 固有表現抽出で抽出した情報の正解率
評価方法 地名 人名 組織名
1位正解率 0.63(19/30) 0.66(20/30) 0.16( 5/30)
5位正解率 0.80(24/30) 0.83(25/30) 0.50(15/30)
MRR 0.70 0.75 0.26


表: 固有表現抽出で抽出した情報のすべての重要項目での正解率
評価方法 地名・人名・組織名
1位正解率 0.48(44/90)
5位正解率 0.71(64/90)
MRR 0.57


表: 上位下位知識で抽出した情報の正解率
評価方法 県名 時代 地名 元号
1位正解率 0.53(16/30) 0.66(20/30) 0.36(11/30) 0.33(10/30)
5位正解率 0.56(17/30) 0.86(26/30) 0.50(15/30) 0.86(26/30)
MRR 0.54 0.75 0.40 0.50


表: 上位下位知識で抽出した情報のすべての重要項目での正解率
評価方法 県名・時代・地名・元号
1位正解率 0.47(57/120)
5位正解率 0.70(84/120)
MRR 0.55


表: クラスタリングで抽出した情報の正解率
評価方法 クラスタ401 クラスタ407 クラスタ765
1位正解率 0.56(17/30) 0.50(15/30) 0.53(16/30)
5位正解率 0.70(21/30) 0.60(18/30) 0.70(21/30)
MRR 0.62 0.52 0.57


表: クラスタリングで抽出した情報のすべての重要項目での正解率
評価方法 クラスタ401・407・765
1位正解率 0.53(48/90)
5位正解率 0.66(60/90)
MRR 0.55


表: 3手法すべての重要項目での正解率
評価方法 固有表現抽出・上位下位知識・クラスタリング
1位正解率 0.49(149/300)
5位正解率 0.69(208/300)
MRR 0.55


next up previous contents
Next: 表の記載欠落箇所のみに対して検索エンジンを用いた情報抽出 Up: 実験結果 Previous: 実験結果   目次
root 2017-03-04