エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
super-goo.com クローラーのrobots.txt による拒否や調整 | pc.casey.jp
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
super-goo.com クローラーのrobots.txt による拒否や調整 | pc.casey.jp
最近、super-goo.com からのアクセスが多くなってきたので、robots.txt を調整することにした。 super-g... 最近、super-goo.com からのアクセスが多くなってきたので、robots.txt を調整することにした。 super-goo.com はgoo のクローラー以下によると、ケータイ用クローラーだそう: 携帯用botに補足されました。 ドメインはsuper-goo.comで、名前のとおりgooの巡回クローラーです。ドコモの公式サーチエンジンらしい(「サイバー サイバー:super-goo.com」より引用) 同様の内用が以下にも: super-goo.com が日に、300~500件ほどアクセスしています。 (中略)調べると、goo社の携帯向け検索ロボットだとか(「super-goo.comからの不審なアクセス | WEBマスターの知恵ブログ」より引用) ということでgoo を運営するNTT レゾナントを調べると、たしかにそのようだ: 「ichiro」は、NTTレゾナント株式会社が運