Facebookのクローラのみを許可する方法
使う機会は多くないですが、BASIC認証をかけているサイトなどでFacebookデバッガーを使って情報を確認したい時、そのままだと401になってしまい確認できないのでFacebookのクローラのみを許可する方法。 .htaccessの場合 .htaccessを使う場合はファイルの最終行が改行されている必要があるので注意。 SetEnvIf User-Agent "^facebookexternalhit.*$" fb_crawler SetEnvIf User-Agent "^facebookplatform.*$" fb_crawler Allow from env=fb_crawler PHPの場合 ハッシュフラグメントなどでFacebookシェアのためだけの専用ページがある場合など。 $ua = $_SERVER["HTTP_USER_AGENT"]; if(!preg_match(
OGP取得用クローラのユーザーエージェントを、TwitterやLINEなど8サービスで調べてみた - Crieit
SNSなどで、投稿されたWebサイトのリンクがリッチに表示される「OGP (Open Graph Protocol)」機能。 Webサイトに簡単なメタタグを組み込むだけでOGP表示されるため、対応するサイトは増えています。 しかし、OGP用のメタタグは一般ユーザーからは見えないし、サムネイル動的生成などでサーバーに大きな負荷がかかることもあるので、できればOGP取得用クローラ以外にはメタタグを生成しないようにしたいもの。 そこで、UA(ユーザーエージェント)からクローラによるアクセスか判定するために、実際にOGP取得用クローラのUAを記録して調べてみました。 結果 2019年3月28日に記録された文字列をそのまま掲載しています。
ブラウザのユーザーエージェントを無意味化した諸悪の根源
FirefoxMozilla/5.0 (機種・OS) Gecko/20100101 Firefox/72.0 ↑わかる SafariMozilla/5.0 (機種・OS) AppleWebKit/605.1.15 (KHTML, like Gecko) Version/13.0.4 Safari/605.1.15 ↑まあわかる IEMozilla/5.0 (機種・OS; Trident/7.0; rv:11.0) like Gecko ↑意外にすっきりしてる ChromeMozilla/5.0 (機種・OS) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.117 Safari/537.36 ↑おまえはMozillaどころかAppleWebKitでもSafariでもないだろカスか？ EdgeMozilla/5.0 (機種・OS
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
