SEOリファレンス - R - robots.txt(robotsテキスト)

robots.txt(robotsテキスト) とは


robots.txt(robotsテキスト)/robots.txt
robots.txtとは、Webサイトのルートディレクトリに配置し検索エンジンクローラーの動作の制限や制御を行うファイルのこと。