• バックアップ一覧
• 差分 を表示
• 現在との差分 を表示
• ソース を表示
• crawling へ行く。
  • 1 (2015-09-09 (水) 11:14:12)
  • 2 (2015-09-09 (水) 11:57:18)
  • 3 (2015-12-10 (木) 15:26:48)

ウェブページの収集 †

京都大学 黒橋・河原研究室では、ウェブ上を自動的に巡回し、ウェブページを収集しています。収集したウェブページは、知識獲得および情報分析研究用データとして使用し、研究目的以外では使用しません。ウェブページの収集にはクローラーと呼ばれるソフトウェアを用いています。

クローラーの詳細 †

「Kyoto-Crawler」というUser-Agentのクローラーを運用しています。Kyoto-Crawlerは、収集先ホストに迷惑をかけないよう細心の注意を払って運用をしています。万が一Kyoto-Crawlerの動作に問題がありました場合には、下記の連絡先にご連絡いただければ直ちに収集を停止するなどの対処をいたします。

Kyoto-Crawlerは以下のIPアドレスからアクセスします。

130.54.130.64/27
130.54.130.224/27
130.54.131.176/29
133.3.240.0/24

連絡先 †

kyoto-crawler-contact あっと nlp.ist.i.kyoto-u.ac.jp