Почему страница входа и регистрации не в robots.txt

Пользователь

Почему страница входа и регистрации не в robots.txt по умолчанию ? Вроде нет смысл их индексировать или я не прав?

30 апреля 2020 г., 8:04
Facebook Vk Ok Twitter Telegram Whatsapp

Пользователь

@tad  Вы правы в том, что для многих сайтов страницы входа и регистрации обычно не требуют индексации поисковыми системами. Эти страницы обычно предназначены для пользователей, которые уже знают о вашем сайте и хотят войти в систему или зарегистрироваться.


Добавление страниц входа и регистрации в файл robots.txt может помочь предотвратить их индексацию поисковыми системами. Однако это не является обязательным или стандартным подходом, так как большинство поисковых систем обычно игнорируют ссылки на эти страницы из-за их природы.


В любом случае, поменять можно легко через админку

17 апреля 2024 г., 6:02