タグ

robots.txtに関するtsupoのブックマーク (2)

  • sitemaps.org - プロトコル

    サイトマップの XML 形式 次に移動: XML タグ定義 エンティティのエスケープ処理 サイトマップ インデックス ファイルの使用 その他のサイトマップの形式 サイトマップ ファイルの場所 サイトマップの検証 サイトマップ プロトコルの拡張 検索エンジンのクローラに通知 このドキュメントでは、サイトマップ プロトコルの XML スキーマについて説明します。 サイトマップ プロトコル形式は、XML タグで構成されています。 サイトマップのすべてのデータ値には、エンティティのエスケープ処理を行う必要があります。 ファイルは UTF-8 エンコードで作成する必要があります。 サイトマップの記述ルールは次のとおりです。 <urlset> タグで始め、</urlset> タグで閉じます。 <urlset>タグ内にネームスペース (プロトコル標準) を指定します。 各 URL に <url> エント

    tsupo
    tsupo 2007/04/12
    Specifying the Sitemap location in your robots.txt file: robots.txt に "Sitemap: <sitemap_location>" という行を追加する
  • 秋元@サイボウズラボ・プログラマー・ブログ: Sitemapsの通知にrobots.txtが使えるようになった

    via Official Google Webmaster Central Blog 更新されたページを検索エンジン各社に通知するSitemapsの仕様(日語訳も増えている。部分的にだけど)だが、これまでGoogleYahooなどそれぞれのサイトでフォームから登録していたサイトマップファイルの位置を、robot.txt に書くことで伝えられるようになったという。 robots.txtに、以下のような行を追加すれば見てくれるように(なる|する)そうだ。 Sitemap: http://www.example.com/sitemap.xml あと、シェアから見て影響は大きくないかもしれないけど、Ask.comもサイトマップに対応したということ。Ask.jpについては書いてないので不明。 [追記] robots.txt でした。複数形 この記事は移転前の古いURLで公開された時のものですブッ

    tsupo
    tsupo 2007/04/12
    robots.txtに、以下のような行を追加すれば見てくれるように(なる|する)そうだ → あとで設置してみるかな
  • 1