cles::blog

Sitemapsも少しずつバージョンアップしているようなのですが、最近それ以外の部分が忙しくて全然キャッチアップできていないんですが、robots.txtを使ってSitemapsの存在をサーチエンジンに指示できるようになったみたいです。

秋元@サイボウズラボ・プログラマー・ブログ: Sitemapsの通知にrobots.txtが使えるようになった

更新されたページを検索エンジン各社に通知するSitemapsの仕様(日本語訳も増えている。部分的にだけど)だが、これまでGoogleやYahooなどそれぞれのサイトでフォームから登録していたサイトマップファイルの位置を、robot.txt に書くことで伝えられるようになったという。

記述方法がシンプルで（対応していれば）全てのサーチエンジンに同じ方法でsitemapsの存在を知らせることができるので便利ですね。Googleのウェブマスターツールではまだこの部分には対応していないらしく、現状では「シンタックスが認識されませんでした」と言われてしまうのですが、少しずつ対応されていくのではないかと思います。

ケータイ用検索サイトのランキングチェックツールが登場しているようです。

IMJモバイル、携帯サイト検索順位チェックツール「モバッチョ」提供開始 - CNET Japan

IMJモバイルは12月25日、携帯サイト検索ランキングチェックツール「モバッチョ」の提供開始を発表した。 モバッチョは、最大7つの検索エンジンを同時に調査し、自分の携帯サイトが、指定したキーワードで検索結果の何番目に表示されるのかをチェックできる、ウェブ上のフリーツール。

ケータイのコンテンツも公式サイトのディレクトリ型から、だんだんオープンな検索へのシフトが進んできているようで、ケータイでもSEOをする時代になってきているということですね。2007年はケータイSEO戦国時代みたいなことになるんでしょうか。

Referrerをみていたら人力検索はてなにこんな質問があがっていました。

人力検索はてな

Googleのウェブマスターツールの【クロール率】の【現在の頻度】にて、私のサイトは、【多い】オプションが選べません。 サイトは、2年目でgoogleインデックス数は5万ページです。 どういう理由で選べないのでしょうか。よろしくお願い致します。

ということで、クロール頻度を調整する画面のスクリーンショットが掲載されているのですが、そこには下記のようなメッセージが記載されています。

Googlebotのクロール頻度はさまざまな要素で決定されます。現在のところ、クロール頻度は要素に含まれておりません。クロール頻度が要素になると、下記の[高速]オプションがご利用いただけます。

Google独特の翻訳英語なので「クロール頻度は要素に含まれる」という部分の意味をちょっと図りかねたりするんですが、以前にGoogleのクロールを増やす方法として、Googleウェブマスターツールでクロール頻度を「多い」に設定してみる方法を紹介していたんですが、これは誰にでもできる対策ではないみたいです。

Yahoo! Slurpの解釈するrobot.txtの内容がいつの間にか拡張されていたようです。

Yahoo! Search、robots.txtでワイルドカード対応 :: SEM R

Yahoo! Search、robots.txtでワイルドカードに対応、クローラSlurpに対して指定した文字列を含む全てのファイル／ディレクトリへのアクセス禁止指示をすることが可能に。

なんといっても目玉なのは拡張子によってクロールが制御できるということでしょうか。

Yahoo! Search blog: Yahoo! Search Crawler (Yahoo! Slurp) - Supporting wildcards in robots.txt

User-Agent: Yahoo! Slurp
Disallow: /*.gif$

こんな感じにするとサイトにある.gifを拡張子に持つファイルをすべて禁止することができるみたいです。mod_rewiteなんかで動的サイトを静的に見せたりしているような場合に、ロボットによる過負荷を防ぐには便利そうですね。

先日、GoogleとYahoo!、MSの間でsitemapsをサポートする旨の発表が行われていたので、早速うちでもsubmit Sitemaps to Yahoo! Search^*1から登録しておいてみました。

Google、Yahoo!、MSの3社、Sitemapsのサポートを発表 :: SEM R

Google、Yahoo!、Microsoftの3社は2006年11月16日、Sitemapsのサポートを発表した。Sitemapsは検索エンジンにWebコンテンツの在処を伝えるもので、検索エンジンはクローリングだけに依存せず、効率的かつ包括的にコンテンツのインデックスが可能となる。

うちのサイト自体は今でもGoogleよりYahooのカバー率のほうが高いわけですが、これでさらにYahooのほうがカバー率が高くなってしまったりするんでしょうか。Googleのときと同じく、気休め程度の効果しかないとは思いますが、生温く見守っていきたいと思います。

• ^*1: Yahoo!USのアカウントが必要です

久しぶりにGoogleのウェブマスター ツール^*1をのぞいてみたら、いつの間にかクロール率の制御という項目が追加されていました。

これを使うことで、サイトのクロールの頻度を「多い」「良好」「少ない」の３段階で設定することが可能なようですので、クロール頻度を増やしたい場合にはサイトマップを登録してクロール頻度を「多い」にしてみてはいかがでしょうか。ちなみにこの頻度は設定から９０日でデフォルトの「良好」に戻るようになっているようです。

• ^*1: sitemapsを登録するところです

SEOをやろうとすると対象のサイトについていろんなデータを収集しないといけないわけですが、そのうちのいくつかをまとめてやってくれる便利なサイトを見つけました。

SEO TOOLS β(SEOツールズ) - 気になるあのサイトのアクセス・SEO対策を無料でチェック！

専門家に代わってＳＥＯアクセス解析を行い、無料・簡単・リアルタイムに、ＷＥＢサイトのＳＥＯ最適度をチェック、診断を行うツールです。あなたのサイトやライバルサイトを今すぐチェックしてみましょう！

取得してくれるデータは
　・Google ページランク/Yahoo! WEB ランク
　・トラフィック（Alexa）
　・キーワード分析
　・被リンク数
　・ドメイン取得年月日
と、それなりのものがそろっています。

リファラを眺めていたらdmoz.orgからのリンクがあったので、調べてみたらdmoz.orgのディレクトリにNP_cles()が載っていました。

Open Directory - World: Japanese: コンピュータ: インターネット: ウェブ上の情報: ウェブログ: ガイドとチュートリアル

別に大したことではないので、数ヶ月前にURLをsubmitしたこと自体をすっかり忘れていました。dmozって掲載されるまでにものすごい時間がかかると言われていますがそのとおりですね。

予想外のキーワードでGoogle１位になったことを競うくだらないものSEOコンテストという企画を見つけました。トラックバックで応募できるみたいです。

shuiro note:: くだらないものでGoogle１位になったコンテスト

たまに、ログを見ていると、おかしな言葉でGoogle１位になってしまっていることってありませんか？そんな話をCHEEBOWさんとしてたら、どうせならくだらないSEOコンテストをやりたいということに。

確かにアクセス解析で検索ワードをボーっと眺めていると「何でこんなキーワードが？」なんて思うことはよくあります。ウチの場合は大概はSEOの副作用で狙っていないキーワードで上位表示されているというパターンなんですが。

Nucleusを使っているとrobotがこないというような話はちらほら目にします。そうすると、話がすぐにNucleusは動的生成なので不利だとか、FancyよりもMagicalの方がいいだとか、If-Modified-Sinceに対応していないとダメだとかすぐにテクニカルな話になってしまう傾向があるようです。

でもテクニカルな部分云々以前にSEOには大事なことがあるわけ^*1です。それさえ守れば動的生成だろうと、Fancyだろうと、きちんとロボットはサイトをクロールしていくというのが、僕が２年間サイトを運営していて導かれた真実です。ちなみにこれは、Nucleus以外で作られたサイトについても同様です。

もちろんここでもYahoo! Site Explorerに登録したりとか、GoogleSitemapsのスキンを作って登録とかしたりとかしていますけど、あくまで気休めです。実際にこれらによってクロールの頻度が変化したということはありません。

論より証拠ということで、参考までにこのサイトの今月の今日までのロボットのアクセス状況を載せてみましょう。

• ^*1: 端的にいえば、良質のコンテンツを定期的に供給するということです。ここが良質なのかといえばその保障はできませんが（笑）