Директива Host больше не нужна в robots.txt

Измeнeния в пoискoвoм функциoнaлe Яндeксa прoдoлжaют дeмoнстрирoвaть стaбильную тeндeнцию нa урeзaниe – ничeгo нового уже давно не добавляется, а вот многое из старого планомерно перестает поддерживаться.
В ответ на подобные опасения, Яндекс сообщил, что смена зеркала сайта будет занимать всего несколько дней. Что ж, понаблюдаем!
Теперь Яндекс окончательно отменил директиву Host:, которая указывала на главное зеркало ресурса. Яндекс сообщает, что для переезда, определения или переопределения главного зеркала достаточно 301 редиректа.
Компаниям, занимающимся анализом сайтов в рунете, а также поддерживающим автоматические сервисы для аудита сайта и проверки ошибок, придется убирать из своих чекеров проверку на наличие директивы host. Кроме Яндекса эта директива не была нужна никому (Google ее не поддерживает).
Это немного усложняет минимилизацию последствий в виде потери страниц и трафика, при переезде сайта, например, на https. Так как раньше главное зеркало можно было указать в host, но не ставить 301 редирект сразу, тогда выпадание старого сайта из выдачи и добавление в нее нового проходили плавно. После того, как страницы нового сайта проиндексировались, нужно было настраивать 301 редирект. Теперь это сделать сложнее, потому что оба зеркала сайта по понятным причинам оставлять нельзя.

Источник новости: Searchengines.ru