В статье описаны два случая, когда на сайтах было несколько файлов robots.txt (по протоколу и поддомену).
Сообщение Смешанные директивы: как Google обрабатывает файлы robots.txt появились сначала на Searchengines.ru.
Источник новости: Searchengines.ru