気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
www.asahi-net.or.jp/~ax2s-kmtnエントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
記事へのコメント3件
- 注目コメント
- 新着コメント
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
いまの話題をアプリでチェック！
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
ロボット排除 - CyberLibrarian
ロボットまたはクローラー(Crawler)と呼ばれるプログラムは、Webページに記述されているリンクを辿って... ロボットまたはクローラー(Crawler)と呼ばれるプログラムは、Webページに記述されているリンクを辿ってサイトを巡回し、自動的にサイト上の文書や画像などを収集、インデキシングしています。Webサーバの管理者やWebサイトの運営者は、自分たちが管理・運営するWebページをWeb検索エンジンに登録されたくない場合などに、ロボットを排除する設定を行うことができます。 現時点では、ロボット排除(Robot Exclusion)に関する公的な標準規格はありません。W3Cが発行しているHTMLの仕様書にはロボット制御の方法に関する記述はありますが、詳細な仕様とはなっていません。robotstxt.orgというサイトで示されている定義がデファクト・スタンダード(事実上の標準)になっており、世界中のほとんどのロボットがこの定義に従って行動しています。 robots.txt ロボットがサイトを訪問すると
ブックマークしたユーザー
すべてのユーザーの
詳細を表示します
詳細を表示します
www.asahi-net.or.jp/~ax2s-kmtn
www.asahi-net.or.jp/~ax2s-kmtn
www.asahi-net.or.jp/~ax2s-kmtn
www.asahi-net.or.jp/~ax2s-kmtn
www.hotpepper.jp
www.sankei.com
nordot.app
dot.asahi.com
anond.hatelabo.jp
sue124.hatenablog.com
www.lambdar.me
qiita.com/mai_llj
forest.watch.impress.co.jp
qiita.com/ampspeed
www.watch.impress.co.jp
www.itmedia.co.jp
www.d-b.ne.jp
www.asahi.com
2010/10/21 リンク