robots.txt の必要性と作り方

robots.txt の必要性と作り方を説明します。
クロールさせたくないディレクトリやファイルがある場合に使うと便利です。
特にイメージ検索にインデックスされたくない画像ファイルがある場合は、利用をお勧めします。
[記事全文]




本記事に関するお問い合わせはこちら
その他、情報提供、ご意見、ご感想はこちらまで。




特定商取引法の表記 | プライバシーポリシー(個人情報保護方針) | サイトご利用規約 |

(C) 2009-2011 OSANAI CO., LTD. All rights reserved.