SitemapのAuto-Discovery : robots.txtを使ってクローラーにサイトマップを見つけてもらう方法

2007/4/12 01:40

「Search Engines Unite On Sitemaps Autodiscovery」によると、Google、Yahoo!、Microsoft、Askの各社の検索エンジンのクローラーがsitemapのオートディスカバリ(自動検知)に対応したそうです。

これにより、robots.txtにsitemapの情報を記述することで、クローラーにサイトマップの存在を知らせることができるようになります。

sitemapのオートディスカバリは、robots.txtに次の1行を追加するだけです。

Sitemap: http://blog.fkoji.com/sitemap.xml

サイトマップが複数ある場合は、サイトマップのインデックスを掲載したページを作成し、そのインデックスページのURLを代わりに記述すればいいそうです。もしくは、複数の“Sitemap: URL”を記述しても構いません。

Webエンジニアやってます。最近はドットインストールの開発がお仕事です。その傍ら、個人で Meity や電車遅延なう、梅酒.in、 #グラドル自画撮り部の部室といったネットサービスを開発・運営してます。梅酒と草野球とリアル脱出ゲームが好きです。