Зеркало сайта — это копия сайта по другому адресу. Веб-сайт в этом случае виден в Интернете под разными именами.
Обычно только одно из зеркал (главное) выдается в результатах поиска. Чтобы указать Яндексу, какое из зеркал является главным, необходимо в файле robots.txt прописать директиву Host:
User-Agent: *
Disallow:
Host: www.main-mirror.com
Директива Host играет важную роль при выборе главного зеркала, но не дает никаких гарантий того, что будет выбран нужный сайт.
Если поисковик найдет зеркала сайта и при этом ни на одном из зеркал не будет файла robots.txt с инструкциями для робота, то поисковик склеит их на своё усмотрение.