Правильность robots.txt - Создание и раскрутка сайта, хостинги
Раскрутка интернет сайта и создание, а также информация о хостингах

Правильность robots.txt

Правильность robots.txt

Платный хостинг     Создание и раскрутка сайтов     Увеличение члена

- Правильность robots.txt скажите, пожалуйста, если есть два имени одного и того же сайта: IRLink.ru IRLink.spb.ru и хочется указать первое имя как главное, правильно ли я оформил robots.txt? (описание этого файла я читал, но после этого всё же на 100% не остался уверен...) User-Agent: * Host: www.irlink.ru User-Agent: * Host: irlink.ru

- Определитесь сначала, что будет основным зеркалом: www.irlink.ru или irlink.ru - это разные вещи. Оставьте что-то одно и прочитайте это .

- ага, те я должен определиться вплоть до того, c www-префиксом или без должен быть домен? те если я быверу основным просто IRLink.ru, то из двух моих записей в robots.txt мне надо только его оставить? (ссылку вашу я читал, но, повтояю, после неё однозначно ясно мне не стало %(

- javaMan, ага, надо выбрать с точностью до наличия www. И не забывайте, что директиву Host поддерживают только Яндекс и Апорт. Так что лучше всего вообще сделать сайт доступным только по одному адресу, а с других вариантов написания сделать 301-редирект на него.

- а 301-redirect yandex и aport в таком случае поймут как указание на то, какое зеркало главное?

- А у них вариантов просто не останется. Правда, если Яндекс уже склеил не так, как вам надо, то на переклейку может потребоваться время.

- Если работает SSI можно написать <!--#if expr=" \"${HTTP_HOST}\" != \"www.irlink.spb.ru\" " --> User-Agent: * Disallow: / <!--#else --> User-Agent: * Disallow: /cgi-bin - ну или что там не нужно делать indexed <!--#endif -->

Интернет казино     Онлайн игры     Купить DVD     Другие сайты