robots.txtでサイト内すべてインデックスされないようにする
公開日： : サーバー
全ページ、全サイトエンジンからクロール拒否するrobots.txt作成
User-agent : *
Disallow : /Webサーバに配置
DocumentRoot直下に置く。
robots.txtがちゃんと拒否設定できてるかテスト
Googleサチコ先生でもやれるみたいですが、サチコに登録してない場合は↓↓
Googleアドセンスレスポンシブ
関連記事
-
HTTPステータス 500が出る意外な理由
ファイルが足りない。 以上。