大手サイトのrobots.txtでわかる「検索でヒットされたくないページ」の特徴
robots.txtとは robots.txtは、検索エンジンのクローラー（bot）に、クロールされたいページや、クロールされたくないページを教えるテキストファイルのことです。多くの検索エンジンのクローラーは、そのドメインの最上位ディレクトリに設置されたrobotst.txtを最初に読み込んで、クロールするべきページとクロールするべきでないページを取得し、それに基づいて巡回します。ただ、一部のクローラーには、このrobots.txtを無視するものもあります。 robots.txtの書き方はおよそ以下の通りです。 User-agent:（ここにbotのユーザーエージェントを記述。ワイルドカード指定も可能） Crawl-Delay:（クロールの時間間隔を指定） Disallow:（クロールされたくないページやディレクトリを指定） Allow:（Disallowで指定されたディレクトリの小階層で
WEBサイトの構成図を作成できるオンライン ソフト「SlickPlan」HTML、PDFで共有可能 - WEBマーケティング ブログ
WEB サイトの構成図 を作成するソフトとして使えるのはマインドマップ作成ソフトですが、多機能なだけに重かったり、サイトマップを作成するのにオプションの設定が必要だったり、毎度テンプレートを探したりと、あまり手軽ではないと思います。 そんなサイト 構成図 をサクッと作って提示、共有したい時に便利なオンライン ソフトをご紹介します。 2009/12/25追記：今日現在、日本語が文字化け、PDF形式でのエクスポートが行えなくなっています。この件につきまして、@kira88が運営元へフィードバックをしてくださいました。お知らせいただき、ありがとうございますｍ（＿ ＿）ｍ 組織のマインドマップツールをマインドマイスターにすべき理由 伸びてる産業、会社、事業を紹介しまくるStrainerのニュースレターに登録!! サイトの構成図をサクッと作れるオンライン ソフト「SlickPlan」「SlickPl
Google SitemapsをMovableTypeで自動作成 - ちょっとテクニカル :ビジネスブログのホームページ制作
Google Sitemaps（サイトマップ）とは、Googleがサイト運営者向けに提供しているウェブマスター ツールの機能で、サイトの更新情報やページの一覧を規定のXMLファイルにして、Googleのクローラーに知らせるものです。 より確実に取りこぼし無く、Googleにインデックスしてもらうための仕組みです。 Google Sitemaps は、対応にさほど手間もかかりませんし、Googleから少しでも多くの訪問者を得たいと思う方は、ぜひ対応してください。 簡単なテンプレートの追加だけで、後は自動で更新されますので、ぜひ対応してみてください。 インデックス・テンプレートに次のようなテンプレートを追加します。 テンプレートの名前は「GoogleSitemaps」などとして 出力ファイル名は「sitemap.xml」とします。（他のファイル名でも問題ありません） <?xml version
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
seotemplate.biz
