Здравствуйте...подскажите кто знает? Мне сказали что в файле robots.txt не указана ссылка на карту сайта. Необходимо прописать ссылку на карту в данном файле. Кто это знает как это сделать? Если можно по подробнее и по понятнее. Спасибо!
В файле роботс должна быть указана ссылка на ваш домен. А ссылку на карту сайта достаточно в Вебмастере Яндекс и Google указать.
Я думаю что лучше стоить в файле "robots.txt" указать Код: Sitemap: http://site.ru/sitemap.xml где site.ru Ваш сайт
Просто вставить эту строчку в любом месте "robots.txt" и указать вместо - site.ru свой сайт....и все?)
Ни в коем случаи не давайте доступ в роботсе к своему sitemap.xml. Это будет Ваша дыра в безопасности! Прячьте свой sitemap.xml в разные папки и показывайте его только ПС.
Полностью согласен. Что Вам, автор, мешает зайти в вебмастер и указать через него путь к своей карте?
Как правильно его спрятать? И почему вы думаете что это может нести угрозу? --- Добавлено, 13 фев 2014 --- Я указал в вэбмастере.... но я сейчас раскручиваю сайт через вэбэффектор... и там мне указали причину ошибки - Ошибка отображается, т.к в файле robots.txt не указана ссылка на карту сайта. Необходимо прописать ссылку на карту в данном файле. После этого нужно написать письмо в службу поддержки с просьбой перепроверить ошибки вне очереди. Вот и думаю как быть?
Послать их куда подальше! Тоже мне спецы! НИ В КОЕМ СЛУЧАИ НЕ ПОКАЗЫВАЙТЕ SITEMAP.XML в robots.txt Создайте папку - mymaps(например) и туда скиньте файл sitemap.xml и адрес вашей карты сайта будет site.ru/mysitemap/sitemap.xml И нигде не показывать его! Никому! Это дыра в безопасности!
Я всегда думал что указав в вебмастере и гуглвебмастер карту сайта....этого достаточно, разве не так?
А все же, как именно карта сайта в роботсе может вредить безопасности? Единственное что мне пришло в голову - это что по ней проще будет сайт копировать, например... Если не трудно расскажите плз, инфы в поиске не нашел.
Я думаю так, что помимо поисковых роботов её сканируют всякие спам боты и воры контента, плюс по ней будет легче найти уязвимость.
1. Грабинг контента. 2. Иногда через карту сайта можно получить доступ к БД(знаю таких умельцев) 3. Благодаря карте сайта можно найти дубли страниц и использовать их, чтобы положить сайт 4. Благодаря карте сайта можно закачать на сервак вирус Это основное чего стоит опасаться, есть еще ряд причин, но они менее заметны на фоне этого.
Здравствуйте ! У меня сайт https://giffs.ru/ и мне тоже советуют добавить карту в роботс сейчас это актуально ? Вот такое сообщение " У вас роботс не правильно прописан, нету пути к sitemap, нету строки для Яндекса, не указан хост, также sitemap выполняется через плагин, который выдает ошибки постоянные, и нужно его заменить на нормальный" Подскажите что мне нужно улучшить в роботс и что у меня с картой ?! Спасибо.
