TOP > Webマーケティング用語集 > アルファベット（ABC）>R > Robot.txt（ロボットテキスト）
クローラーが巡回して欲しくないページをここに記述しておくとにより、クローラーはそのページを除いて巡回する。
