Обнаружил что страница sitemap запрещена к индексации <meta name="robots" content="noindex,follow" /> в robots.txt всё в порядке там sitemap к индексации не запрещён подскажите может через базу данных где-то можно найти.
Так же ищу. Раз и начало. meta тег robots content=noindex,nofollow от куда взялся на категориях? Проблема с индекскацией несколько категорий Как то раз на сервисе яндекса посмотрел какие у меня исключённые страницы в индексе. И увидел такую картину. Главные категории, в которых есть подкатегории стали исключённые из индекса рис1. И действительно в коде на станице в header есть данная запись: <meta name="robots" content="noindex,nofollow" />. Откуда она взялась? В админ панели Престы в редакторе категории проставлено всё обычно. Зелёная галочка стоит: "Показывать страницу категории". Полез в файл Robots.txt, там тоже нет ни каких проблем. Директория не закрыта, страница тоже нет в списке закрытых.Чтоб совсем не грешить на свой файл Robots.txt, я его просто переименовал и с админ панели сайта заново сгенерировал этот файл.Настройки -> SEO и URL - выбрал сгенерировать карту. Далее в яндекс вебмастере все данные страницы, которые были исключены отправил на Переобход страниц. И Добавил эти страницы к важным с отметкой отследить. А пока сам просто перезагрузил страницы где был данный тег. Надпись в шапке так же и осталась <meta name="robots" content="noindex,nofollow" />. Правильно ли я понимаю, что файл Robots.txt здесь ни причём. Не за счёт него выходит данный метатаг? Сайт про диваны https://mebel-darna.ru/.В чём может быть дело?Жду так же результатов индексации от ЯндексВебмастер. Если узнаю - напишу. Начал на буржунете искать.
Простое решение: в настройках шаблона отметить что индексировать что нет, где-то в 1.5 это было, сейчас не посмотреть, т.к. 1.5 уже не осталось Сложное решение: открываете файл header.tpl в шаблоне, в верхней части находите этот мета тег, он выводится по условию внутри if если у страницы есть запрет на индексацию, весь {if ...}... {/if} закомментируйте следующим образом {*if ...}... {/if*} - все, мета тег показываться не будет К минусам можно отнести, что все страницы закрытые для роботов станут открытыми А вообще sitemap не нужен для индексации, лучше поставьте модуль Google sitemap и подсуньте поисковикам xml файл - толку больше будет