Kyoto-Tohoku-Crawlerついて

概要

京都大学 黒橋・河原研究室東北大学 乾・岡崎研究室 では、合同でウェブ上を自動的に巡回し、ウェブページを収集しています。

収集したウェブページは、知識獲得および情報分析の研究用データとして使用します。ウェブページの収集にはクローラーと呼ばれるソフトウェアを用いています。

クローラーの詳細

「Kyoto-Tohoku-Crawler」というUser-Agentのクローラーを運用しています。 Kyoto-Tohoku-Crawlerは以下のIPアドレスからアクセスします。

130.54.130.64/27
130.54.130.224/27
130.54.131.176/29
133.3.240.0/24
東北大のIPアドレスをここに書く

クロール拒否方法

Kyoto-Tohoku-Crawlerは、収集先ホストに迷惑をかけないよう細心の注意を払って運用をしていますが, 万が一、Kyoto-Tohoku-Crawlerの動作に問題がありました場合には、下記の連絡先にご連絡いただければ直ちに収集を停止するなどの対処をいたします。

連絡先

kyoto-crawler-contact あっと nlp.ist.i.kyoto-u.ac.jp


トップ   新規 一覧 検索 最終更新   ヘルプ   最終更新のRSS