googlebot からのアクセスって？
最近、気になったことに、crawl-66-249-xx-xx.googlebot.com からのアクセスが多い、一昨日（2009年）4月2日は 53 回のアクセスがあった。トップページへのアクセスではなくて記事１つ１つに…
リモートホスト crawl-66-249-xx-xx.googlebot.com 訪問者名 googlebot
ユーザーエージェント Mozilla/5.0 (compatible; Googlebot/2.1; http://www.google.com/bot.html)
端末 Robot/Tool
表示環境 - 言語 en （English）
そもそも Googlebot ってなんじゃろ？
Google がサイトの情報を集めるために徘徊？させているプログラムのことです。
もし、今後検索クローラーを拒否して、検索エンジンにインデックスされないようにしたい場合は…
ＨＴＭＬの編集画面で、<head></head>内のメタタグのところを以下のように記載します。
<meta name="robots" content="noindex,nofollow">と入力。
・noindex ＝ 検索ロボットに対して登録されないように。
・nofollow ＝ 文書内のリンクをたどらないように。
という意味なので、これでほとんどの検索エンジン（クローラー）を拒否できるはずです。
ＰＳ：Google のみを拒否したい場合は、
<meta name="googlebot" content="noindex,nofollow">としましょう。
検索サイトから来られたくない人は上の方法でブロック出来るね。
ひでのブログは、SEO 対策とかしてる訳でもないけど、2006年8月にブログを書き初めて、今日（2009年4月5日）までに記事の数が 1,138 件となった。特に意図していなくても特定の ”検索フレーズ” に対して検索の上位にランクされる場合があって困惑することもある。え？ＸＸさんじゃなくて、なんで俺のブログが1番なの？と思うことは多々あるし、あまりテキトーなこと書けないじゃん！と思ったりする。
例えば、google で次の様な検索語を複合したフレーズや検索語を検索した場合…
…等々は上位候補として登録されている。本来喜ばしいことだろうが、おこがましくて喜べないことも…
Googlebot チェッカーなるものを見つけた。
Linkfind.org はあなたのサイトのバックリンクや Googlebot の来訪情報をアイコン形式で表示させることのできるツールです。これらの情報を取得するには、通常は色々と手間がかかりますが、このアイコンをサイトに貼っておくだけでいつでもすぐにあなたのサイトの SEO 状況を把握することができるようになります。
な、訳でサイドバーに Googlebot チェッカーを配置してみた。どんなタイミングでクロールするんだろうか？毎日アクセスがある様だったら外すけど。
ほぼ毎日か、或いは１日遅れでクロールに来るのが判ったのでサイドバーから外しました（2009年7月１日追記）
| 固定リンク
「パソコン・インターネット」カテゴリの記事
- ネットで有名な画像をAIで動画にしたらクソワロタｗｗｗ …を紹介してみる(2024.06.22)
- パンデミック条約反対デモ- マスコミは一切報じず 中国化する日本(2024.04.14)
- 紅麹騒動の黒幕を漫画にしてみた(マンガで分かる) …を紹介してみる(2024.04.13)
- Vtuber 愛里【踊ってみた】MuscleCar(2024.04.07)
- Vtuber 愛里【踊ってみた】今よ！ファンタジスタドール(2024.03.17)
コメント