robots.txt - файл с инструкциями для поисковых ботов.