Mac標準のテキストエディットを使ってrobots.txtを書くときの注意点完全にわけがわからない。 robots.txtによる分析の結果 robots.txtの記述は間違ってないのに「シンタックスが認識されませんでした」や「無効なサイトマップのURLが検出されました」などの結果がでました。 意味がわかりません。未知の領域に突入してしまいました。(*´Д`)ﾊｧﾊｧ 原因は何か？ グーグルはrobots.txtのファイルフォーマットをUTF-8と想定している。 これがEUCやSHIFT-JISになっているとファイルの内容が正しく処理されない可能性があります。 google robots.txtの仕様 ということなので、テキストエディトの設定を確認。 するとエンコーディング（文字コード）が、Shift_JISでした。 テキストエディットはデフォルトでUTF-8らしい。 僕は仕事でwindowsのメモ帳で作成されたファイルをテキストエディットで開くことがよくあるので、
