クローラー

うっかり忘れていた robots.txt の設定。 「robots.txt」とは、 検索エンジン(Google先生とかYahoo!さんとか)がサイトを巡回して検索結果に表示されるようにしてくれるクローラーというものに、「このサイトはここを登...