偶然知った Google の挙動
取れたてホヤホヤのドメイン名でウェブサーバを公開する。通常、この時点で誰かにその存在を知られてしまうことは、まずない。仮に example.com というドメイン名を取得したことにします。
ここで、Google にて "site:example.com" の検索を行ったところ、興味深いことが起きました。検索結果は当然、「site:example.comに該当するページが見つかりませんでした。
」になったんですが、検索から 1 分もしないうちに Google のクローラ ( Mediapartners-Google/2.1 ) が存在確認にいらっしゃったのです。その振舞いと反応の速さにびっくり。
幸い ( ? ) 全てを拒否するように書いてある /robots.txt が置いてあったので、"GET /robots.txt" だけなされてお帰りになりましたが。
- タグ
- domain names
- web technology
- 公開日時
- 2006-04-03T12:41:45+09:00 @195
- Permalink URI & TrackBack URL
- http://blog.drry.jp/2006/04/03/behavior-of-google
コメント