Информация о файле
robots.txt for Invision Community - этот файл предписывает поисковым системам не индексировать внутренние страницы, такие как вход и регистрация, политика конфиденциальности и так далее. Также исключаются страницы с параметром csrf, страницы создания контента, обнаружение контента и т.д.
Убедитесь, что вы заменили example.com в последних двух строках на свой реальный адрес сообщества.
Что нового в версии 1.0.2 Просмотр изменений
Размещено
Для этой версии изменений нет.