Googlebot-Mobileが見つけたURLはGooglebotもクロールする - F.Ko-Jiの「一秒後は未来」

先日モバイル用のサイトマップを作成してめでたくGooglebot-Mobileに梅酒.inモバイルがクロールされるようになったのですが、今度は別の問題が発生してしまっていました。 それは、モバイル用のページのURLに通常のGooglebotが巡回にきていたという問題です。 ドコモが提供するiモードIDは「URLに guid=ON をつけないと取得できない」という意味不明な仕様になっているので、仕方なくモバイル用のページにはすべて「guid=ON」をつけています。 (例) PC用URL: http://umeshu.in/brand/show/34 モバイル用URL: http://umeshu.in/brand/show/34?guid=ON 不思議なのは「guid=ONがついたURLは Googlebot-Mobile がクロールして見つけたものであるにも関わらず、そのURLに対して通常