файл robot.txt

Тема в разделе "OpenCart", создана пользователем Eevvggeennyy, 28 дек 2013.

  1. Eevvggeennyy

    Eevvggeennyy

    Регистрация:
    11 июн 2013
    Сообщения:
    50
    Симпатии:
    0
    подскажите надо ли все таки в robot.txt отдельно указывать инструкции для яндекса? кто говорит что надо, кто не надо... по логике напрашивается - зачем что-то указывать отдельно для яндекса если он и так, не найдя инструкции конкретно для себя, будет смотреть в общие инструкции??
     
  2. alex_storm

    alex_storm дизайн, CSS Команда форума

    Регистрация:
    11 дек 2012
    Сообщения:
    1.120
    Симпатии:
    559
  3. Eevvggeennyy

    Eevvggeennyy

    Регистрация:
    11 июн 2013
    Сообщения:
    50
    Симпатии:
    0
    это я видел. и как раз его и поставил на свой сайт. но потом на глаза попался robots.txt который вместе с ocstore идет и возник вот такой вопрос... а зачем вообще указывать отдельно для яндекса...
     
  4. Dotrox

    Dotrox Команда форума

    Регистрация:
    27 ноя 2012
    Сообщения:
    2.044
    Симпатии:
    774
    Дань традициям.
    Вообще, у Яндекса есть (или, по крайней мере, были) специфические директивы для роботса, которые другие поисковики восприняли бы, как ошибку.
    Универсальные директивы Яндекс понимает, так что отдельно для него можно не указывать ничего, если не нужно что-то специфическое.