自由スペース２
Bing Web: robots.txt
robots.txt とは？
robots.txt とは、goo、Google、Lycos などのロボット型検索エンジンに対する命令を記述するためのファイルです。自分のページが、検索エンジンのデータベースに登録
Yahoo!知恵袋 - 「robots.txt」の検索結果（解決済みの質問）
robots.txtで巡回を拒否しても、Yahoo!検索結果に表示されるようになりました。
robots.txtで巡回を拒否しても、Yahoo!検索結果に表示されるようになりました。9月20日頃Yahoo!サイトエクスプローラーにてサイト全体を「検索結果で非表示」に設定し
自由スペース３
