Googleサイトマップ、「robots.txt」ファイル分析を追加(SEM-R)
robots.txtに記述した通りにGooglebotが動作しているかを把握するために利用できるだろう。
ちょうど、前の記事に記載したように、おっかなびっくりでクロール対策を施したのと同時に、この"robots.txt"の動作確認機能が追加されました。ホスティングブログ上がりの「にわかサイト管理者」にとっては助かります(笑)
具体的なページ(記事)URLを入力すると、そのページをGooglebotが探索するかどうかを答えてくれますので、"robots.txt"の単純な誤記もすぐに発見できます。
もちろん、従来から提供されていた"Sitemap登録機能"も親切です。提示されたファイル名で空のHTMLファイルをルートディレクトリにアップロードすることによって、Sitemapを登録するなんて知りませんでした。こういうことは使ってみないと分からないものです。
ブログにおいて、検索エンジンにインデックスされるのが個別記事でないと、うっとおしいモノだと思います。ホスティングブログではその辺りのコントロールが全くできず、月別やカテゴリー別のアーカイブばかりがインデックスされ、割り切れない思いをしたものでした。せっかく、ドメインを取ってブログを始めたのですから、やっぱり検索エンジン対策はちゃんとやっておきたいものです。
その後、BlogPeopleでのアクセス数は実態に戻りました。もうJavaScriptでリンクリストを出力するようにしたせいもあります。一時は2万6千なんて数字が出て、とても驚きました。
