« バッテリ技術、その噂と真実(その1) | メイン | MSNサーチ »
2004年02月26日
Googlebotについて
Googlebot Crawler(クローラー)
Googlebot一覧：Google解体新書
クローラーのホスト別による性質など。
クローラーのホストによって行動が違うのでは？という話。
逆引きしてサブドメインがcrawler[1-9]であれば、ディープクロール、つまり深い階層まで達するクローラーで、crawler1[0-5]であれば、フレッシュクロール、何をしてるのか今ひとつ分からないボットだとか。
今もってる案件で来たのは
64.68.82.47 crawler11.googlebot.com
64.68.82.178 crawler14.googlebot.com
なので望み薄？確かにrobots.txtと/しか見に来てません。
Deep Crawl：Deepbot（ディープクロール：ディープボット）
Crawl1 〜 Crawl9
IPが216.239.46.xのGooglebot（グーグルボット）。
Google Dance終了後に活動を開始、Webページをインデックスし、キャッシュ、PageRank（ページランク）、バックリンクを確定させる。
Main Crawl（メインクロール）と呼ばれることもある。
« バッテリ技術、その噂と真実(その1) | メイン | MSNサーチ »
投稿者 sima2 : 2004年02月26日 11:11
|
トラックバック
このエントリーのトラックバックURL:
http://sima2.com/mt-tb.cgi/1219
このリストは、次のエントリーを参照しています: Googlebotについて:
» ファッション from fashion.aspshoping.com
ファッションランキング http://fashion.aspshoping.com/ [続きを読む]
トラックバック時刻: 2006年03月08日 09:55
» ファッション from fashion.asp-catalog.net
ファッションの事ならランキング http://fashion.asp-catalog.net/ [続きを読む]
トラックバック時刻: 2006年03月18日 00:59
» インターネット関連 from net.asp-omise.net
インターネット関連ランキング http://net.asp-omise.net/ [続きを読む]
トラックバック時刻: 2006年03月28日 23:40
» 派遣 from job.asp-shoping.com
派遣ならランキング http://job.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年04月10日 05:42
» 旅行・地域 from travel.asp-shoping.com
旅行・地域ならランキング http://travel.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年04月24日 00:50
» ホームページ制作 from web.aspshoping.com
ホームページ制作ランキング http://web.aspshoping.com/ [続きを読む]
トラックバック時刻: 2006年05月23日 03:50
» 女性向き from woman.asp-shoping.com
女性向きランキング http://woman.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年06月06日 11:55
» 出会い from deai.aspomise.com
出会いならランキング http://deai.aspomise.com/ [続きを読む]
トラックバック時刻: 2006年06月14日 21:26
» 占い from fortune.asp-japan.net
占いの事ならランキング http://fortune.asp-japan.net/ [続きを読む]
トラックバック時刻: 2006年06月22日 00:26
» 出会い from deai.asp-shoping.com
出会いの事ならランキング http://deai.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年07月04日 13:22
» 音楽・映画 from music.asp-hanbai.com
音楽・映画ならランキング http://music.asp-hanbai.com/ [続きを読む]
トラックバック時刻: 2006年07月29日 13:44
» ファッション from fashion.asp-shop.net
ファッションランキング http://fashion.asp-shop.net/ [続きを読む]
トラックバック時刻: 2006年08月10日 17:59
» 旅行・地域 from travel.asp-shop.net
旅行・地域の事ならランキング http://travel.asp-shop.net/ [続きを読む]
トラックバック時刻: 2006年09月08日 21:44
» 素材 from sozai.asp-shoping.com
素材の事ならランキング http://sozai.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年09月30日 19:46
» 車・バイク from car.asp-hanbai.com
車・バイクならランキング http://car.asp-hanbai.com/ [続きを読む]
トラックバック時刻: 2006年10月28日 17:27
» 派遣 from job.asp-hanbai.net
派遣ランキング http://job.asp-hanbai.net/ [続きを読む]
トラックバック時刻: 2006年11月16日 19:06
» CGI from cgi.asp-sales.net
CGIの事ならランキング http://cgi.asp-sales.net/ [続きを読む]
トラックバック時刻: 2006年12月06日 16:48
» 音楽・映画 from music.asp-shoping.com
音楽・映画ランキング http://music.asp-shoping.com/ [続きを読む]
トラックバック時刻: 2006年12月25日 17:14
» 金融 from money.aspichiba.net
金融ならランキング http://money.aspichiba.net/ [続きを読む]
トラックバック時刻: 2007年01月12日 13:47
» ファッション from fashion.aspichiba.net
ファッションランキング http://fashion.aspichiba.net/ [続きを読む]
トラックバック時刻: 2007年01月31日 11:15
» ホームページ制作 from web.asp-omise.com
ホームページ制作ランキング http://web.asp-omise.com/ [続きを読む]
トラックバック時刻: 2007年02月21日 16:11
» 出会い from deai.asp-mousi.com
出会いの事ならランキング http://deai.asp-mousi.com/ [続きを読む]
トラックバック時刻: 2007年02月27日 09:46
» PC関連 from pc.aspichiba.net
PC関連ランキング http://pc.aspichiba.net/ [続きを読む]
トラックバック時刻: 2007年03月19日 18:40
» ランキング from aspichiba.com
ランキングランキング http://aspichiba.com/ [続きを読む]
トラックバック時刻: 2007年04月13日 15:22
» ペット・動物 from pet.asp-hanbai.net
ペット・動物ランキング http://pet.asp-hanbai.net/ [続きを読む]
トラックバック時刻: 2007年04月18日 17:20
» ネットアイドル from netidol.asp-ichiba.net
ネットアイドルランキング http://netidol.asp-ichiba.net/ [続きを読む]
トラックバック時刻: 2007年05月30日 12:35
