SEO対策:Googleの鬼クロール
Diary (177 items)
2004年12月03日
1ヶ月前の11月1日、Googleのインデックス倍増と共に、
当サイトへのGoogleクローラーのアクセスが、1日で1000以上ありました。
>Googleのインデックス倍増の影響?
これにより、当サイトのアクセス数も当サイトなりに急激に伸びた訳ですが、
それ以降、このクローラーの動きは、
私の中で”Googleの鬼クロール”と名づけました。
アクセスログから想像するに、その動きは、
まるで当サイトを舐めるかの如く、数時間掛けて、
鬼のようにアクセスしクロールしていくからです。
当サイトへのGoogleクローラーのアクセスが、1日で1000以上ありました。
>Googleのインデックス倍増の影響?
これにより、当サイトのアクセス数も当サイトなりに急激に伸びた訳ですが、
それ以降、このクローラーの動きは、
私の中で”Googleの鬼クロール”と名づけました。
アクセスログから想像するに、その動きは、
まるで当サイトを舐めるかの如く、数時間掛けて、
鬼のようにアクセスしクロールしていくからです。
<スポンサードリンク>
以前より、当サイトへのアクセスで一番多いのはGoogle検索経由であり、
当サイトのアクセス数にとって、Googleクローラーの動きは、
ある意味、生命線とも言えますが、
この”Googleの鬼クロール”が本日(12月3日)確認されました。
先月に比べて、その数は半分以下にはなっていますが、
それでも、1日で500以上のクロール、
時間帯は、午前2時から午前6時に掛けて行われました。
もちろん、Googleクローラーは、
この月初め以外にも何日かおきにクロールしますが、
1日でこれだけのクロールをするのは、今のところ月初めだけです。
当サイトの現在のアクセス数ですが、
この1週間は少し減少傾向にあります。。
明らかにGoogle経由でのアクセスが少なくなっているのが原因ですが、
以前、「Googleクローラーの動きは気にするな」でも書いたように、
クローラーの動きに一喜一憂しないとは決めたものの、
やはり、その動きは気になります。
前に他サイトで、
「Googleのクロール時に、丁度サーバーがダウンしてしまっていた。
それにより、以前にクロールされていた内容も消えて、
アクセス数が激減、取り戻すのに2〜3ヶ月かかった」
というような記事で知りました。
これはずっと私の頭の片隅にあって、
なるべく、”鬼クロール”の時期にはサイトに問題が無い様に気をつけていますが、
しかし、この1週間前、
自作アクセス解析ツールの障害と、XREAサーバーの障害が重なって、
当サイトへアクセスしてもエラーが表示される現象が起きていたいました。。
これが”Googleの鬼クロール”の時期と重なっていたらと思うと、ゾッとします。。
ブログサービスサイトでサイト構築すれば、
結構、直ぐにクロールされて検索結果に現れます。
それは、サービスサイト自身が巨大なアクセスサイトであり、
それからリンク貼られる事で、この結果に繋がると考えますが、
一からサイト作りした場合、余程いろいろSEO対策を練らないと、
簡単にはクロールされません。。
そんな努力もあってのアクセス数が、
上に書いたように、サイトエラーによって消えてしまうというのは、
かなりブルーになってしまいますよね。。
まあ、SEOに関しては、特に確証を持った知識や技術も無く、
他サイトで語られている内容とも照らし合わせて、
自分の想像の枠で話をしている感がありますが、
まんざら外れていない事もあるかとは思います。
アクセス数を気にされている他サイトの方々、
最近は、特に月初めのクローラーの動きに注意した方がいいかも知れません。。
当サイトのアクセス数にとって、Googleクローラーの動きは、
ある意味、生命線とも言えますが、
この”Googleの鬼クロール”が本日(12月3日)確認されました。
HOST名:crawl-66-249-66-100.googlebot.com,
IPアドレス:66.249.66.100,
アクセス回数:527
先月に比べて、その数は半分以下にはなっていますが、
それでも、1日で500以上のクロール、
時間帯は、午前2時から午前6時に掛けて行われました。
もちろん、Googleクローラーは、
この月初め以外にも何日かおきにクロールしますが、
1日でこれだけのクロールをするのは、今のところ月初めだけです。
当サイトの現在のアクセス数ですが、
この1週間は少し減少傾向にあります。。
明らかにGoogle経由でのアクセスが少なくなっているのが原因ですが、
以前、「Googleクローラーの動きは気にするな」でも書いたように、
クローラーの動きに一喜一憂しないとは決めたものの、
やはり、その動きは気になります。
前に他サイトで、
「Googleのクロール時に、丁度サーバーがダウンしてしまっていた。
それにより、以前にクロールされていた内容も消えて、
アクセス数が激減、取り戻すのに2〜3ヶ月かかった」
というような記事で知りました。
これはずっと私の頭の片隅にあって、
なるべく、”鬼クロール”の時期にはサイトに問題が無い様に気をつけていますが、
しかし、この1週間前、
自作アクセス解析ツールの障害と、XREAサーバーの障害が重なって、
当サイトへアクセスしてもエラーが表示される現象が起きていたいました。。
これが”Googleの鬼クロール”の時期と重なっていたらと思うと、ゾッとします。。
ブログサービスサイトでサイト構築すれば、
結構、直ぐにクロールされて検索結果に現れます。
それは、サービスサイト自身が巨大なアクセスサイトであり、
それからリンク貼られる事で、この結果に繋がると考えますが、
一からサイト作りした場合、余程いろいろSEO対策を練らないと、
簡単にはクロールされません。。
そんな努力もあってのアクセス数が、
上に書いたように、サイトエラーによって消えてしまうというのは、
かなりブルーになってしまいますよね。。
まあ、SEOに関しては、特に確証を持った知識や技術も無く、
他サイトで語られている内容とも照らし合わせて、
自分の想像の枠で話をしている感がありますが、
まんざら外れていない事もあるかとは思います。
アクセス数を気にされている他サイトの方々、
最近は、特に月初めのクローラーの動きに注意した方がいいかも知れません。。
<スポンサードリンク>
前の記事 次の記事