クローラ
その他の語句
索引はこちら
ク
用語の解説
クローラとは
(クローラー,Webクローラ,検索ロボット,サーチボット,crawler,web crawler,search robot,searchbot,)
クローラとは、インターネット上のあらゆるWebサイトの情報を取得して、検索用データベース・インデックスを作成する自動巡回プログラムのことである。
Webサイトを這う(クロールする)ことからこのような名称が付けられた。
クローラでは、WebサイトのHTMLに記載されているリンクをたどり、そのWebサイトがどのような内容なのか、どのような構造になっているのかなどを判断し、データベース化していく。
クローラがアクセスできるファイル・情報はすべてデータベース化され、誰もが検索できるようになってしまうので、機密文書などに関してはアクセス権を設定するなどの注意が必要である。
近年では検索結果の上位に表示させるためのSEOとして、有名検索Webサイトのクローラの動きを特に意識したWebサイト構築が目立つようになってきている。
CNET Japan
-
「楽天モバイル WiFiスポット」提供開始--混雑エリアでセルラー網を補完
楽天モバイルは6月19日、契約者向けの公衆Wi-Fiサービス「楽天モバイルWiFiスポット」を始めた。混雑しやすい都心部の商業施設などから順次広げ、回線が混み合う場所でも安定して通信できるようにする。
