[Ищу] список ссылок на YML фалы магазинов

Тема в разделе "Каталоги, рейтинги, счетчики", создана пользователем web2us, 10 мар 2013.

  1. web2us

    web2us

    Регистрация:
    10 мар 2013
    Сообщения:
    18
    Симпатии:
    1
    Есть ли такая база со ссылками на файлы товаров имеющихся в продаже от магазинов?
    желательно база ссылок на фалы для яндекс маркета
     
  2. djnesteroff

    djnesteroff

    Регистрация:
    15 мар 2013
    Сообщения:
    13
    Симпатии:
    3
    можно посмотреть для каких движков есть еспорт в Я.Маркет. Потом по признаку движка спарсить списки и подставив ссылки експорта получить нужный список ссылок. Можно еще поискать в файлах robot.txt запрет на индексацию YML
     
    web2us нравится это.
  3. web2us

    web2us

    Регистрация:
    10 мар 2013
    Сообщения:
    18
    Симпатии:
    1
    сколько не посмотрел эти robots.txt у пары сайтов только видел
    большинство движков завуалирован этот экспорт:(