Зеркало — полная или частичная копия сайта. Копии сайта создаются для разных целей.
- Для повышения надежности доступности сайта, особенно если ресурс имеет очень большую посещаемость. Наличие зеркала позволяет уменьшить нагрузку на сайт, увеличить скорость скачивания файлов.
- Регистрация доменного имени в различный зонах.ru,.com,.net и тд. Регистрация похожих доменов, например, с дефисом и без.
- Для поисковых систем сайты вида www.site.ru и site.ru являются разными, один из которых в последствии определяется как главное зеркало, а второй — обычное.
Для продвижения сайтов очень важно учитывать особенности поисковых систем (далее ПС) и заранее указывать главное зеркало. Так как зеркало сайта — это его полный дубликат, то многие ПС, в том числе Яндекс, стараются не хранить его в своей базе, и в поиске участвует только основной сайт (главное зеркало). Практически у всех поисковых машин существуют методы определения и склейки зеркал, специальный робот зеркальщик формирует группу зеркал, а затем выбирает один сайт как основной. Иногда главным назначается не то зеркало, которое нужно вам. Чтобы из поисковый базы случайно не выпал нужный сайт, необходимо указать ПС главное зеркало. Это делается через файл robots.txt при помощи директивы Host:
User-Agent: *
Host: www.domain.ru
Такой файл необходимо создать для каждого зеркала и загрузить в корневой каталог.
Метки: robots.txt, зеркало
Кстати, на сколько я знаю, директива Host работает тоько для Яндекса.
Это верно, но при поисковой оптимизации проблемы с зеркалами возникают именно у этой поисковой системы.
Да согласен. Вот здесь кстати очень бурное обсуждение на эту тему.