Baiduのクローラーについて
クローラーの種類について
Baiduspider
「Baiduspider」はウェブ検索および動画検索の情報収集(新しいページの取得、および更新)、モバイル検索におけるトランスコーダー用の情報収集を行うクローラです。
過去に大きな負荷を各サイト様に与えてしまった反省を踏まえ、クロールを行う際には、各サイト様へ過剰な負荷をかけることのないよう注意を払っておりますが、もし問題を発見されましたら、お問い合わせページよりご連絡ください。
トランスコーダーはPC向けに作成されたページを携帯電話から見やすく自動変換するサービスです。トランスコーダーにつきましては、モバイル検索ヘルプをご覧ください。
BaiduImagespider
「BaiduImagespider」はウェブサイト上の画像を検出し、画像情報を取得するクローラーです。取得した情報は画像検索サービスのインデックス構築に利用されます。
BaiduMobaider
「BaiduMobaider」は、モバイルサイト検索向けのクローラーです。取得した情報はモバイル検索のインデックス構築に利用されます。
※BaiduMobaiderの利用するIPアドレスの範囲は [119.63.195.0/24(119.63.195.1-119.63.195.254)] となります。
上記情報は、2009年10月現在のものです。