Как и чем проще всего спарсить магазин-донор, сделанный на opencart для моего магазина opencart? Можно не только товары и категории Существует ли какой-либо метод отличный от Content Downloader и подобных? Может модуль какой-то? Спасибо!
Зачем что-то искать, Content Downloader - супер парсер, сам пользуюсь. Можно спарсить и в стандартный импорт/экспорт залить без особых трудов. Правда я другими парсерами не пользовался, но мне кажется CD - самый универсальный и на 100% рабочий. Лучше только - парсер на заказ под конкретный сайт.
Лично у меня - лицензия(и не чуть не пожалел, часто нужно парсить). Парсер окупился на 1000% (не в коем случае не рекламирую) Но отдельные лица где-то брали. Честно я не знаю.
в нете валялась старая версия - нагуглить можно. а так... можно на скидочнике прикупить чтоб дешевле было. это прога своих 20-30 уе (крму как повезет))) стоит
Content Downloader варезный работать не будет,можно даже не упираться искать.Проще заглянуть к ним на форум и рублей за 500 заказать парсинг. http://sbfactory.ru/?p=600
Какая у Вас лицензия? start, standard, EXTENDED? и как происходит импорт скачанного в БД опенкарта? если через CSV, подскажите какой CSV лучше всего работает? Спасибо!
Уж легче, кажется, за 1000 руб. купить лицензию и самому изучить софт. ИМХО, вещь нужная в хозяйстве. Изначально можете приобрести лицензию на 5 потоков, потом можно докупить потоки. Импорт происходит через CSV. Лично я пользуюсь Total Import Pro и он прекрасно справляется с задачей - заливал около 200к товаров + постоянно обновляю каталог.
Лицензия не помню за 50 долларов которая Контент парсится по шаблону стандартного бесплатного импорта/экспорта, им и заливается. А то что вещь нужная в хозяйстве - так это 100 процентов В основном, кому делал магазы, все сначала говорят, что типа сами товар зальют, но когда товаров 200 из 10 000 забьют, обращаются ко мне))
Юзал ранее http://www.visualwebripper.com Простой. С кодом разбираться сильно не нужно. Все в визуальной оболочке делается, клацанием на картинки и т п. Обучающие видео прилагаются на сайте. В интернете найти можно рабочие. Если нет то скоро выложу.
у меня подвешивается бесплатный импорт-экспорт при большом количестве товаров, даже с минимальным описанием и без картинок. Тут надо построчный импорт решать. а лицензия у вас на 5 потоков я так понимаю. не медленно ли парсит?
Лицензия на 10 потоков, скорость парсинга зависит от многих факторов, в частности скорости сайта - донора. Но быстро - не всегда хорошо. Парсинг - таже ддос атака на сайт донор. Меня по молодости забанили по ай пи несколько сайтов. И тут возникает проблема, например, если ты с этим сайтом постоянно работаешь, нормальным способом он тебя не пустит. Теперь при парсинге я использую соединение через прокси - а это уже потеря скорости, плюс КД позволяет работать через прокси, список которых ты вводишь в него же, и если тебя забанили при скачке контента, парсер автоматически переключается на другой ай пи и работает уже с него. Чтоб не банили, еще увеличиваю время между запросами. Долго - да (относительно конечно, одна страница - 1 сек), но безопасно, можно быть уверенным что в следующий раз зайдешь на этот сайт. Если не париться и парсить на прямую без прокси соединений и ограничения по запросам: артикул-категория-товар-цена-характеристики-картинка тот же украинский югконтракт с 10к товарами обрабатывать 40-60 мин (зависит от звезд или луны =) )
у тех же разработчиков есть "уникализатор" контента. думаю без него тоже не обойтись? слышал что яндекс последний год очень злостно разбирается с плагиаторами.
У меня был магазин электроники, многие страницы товара не индексировалась в яндексе, только статьи и главная страница. Это надо учитывать (прелесть контента добытого парсингом). Но у меня весь трафик шел по рекламе и моим визиткам, поисковики не были моей основной целью. Может быть этот "уникализатор" и нужен, главное чтоб он не работал по принципу переводчика гугл - тогда этот текст станет вообще нечитабельным. Естественно самый лучший контент - уникальный. Да - дорого, да - долго (особенно для электроники и бытовой техники где товаров за 10к если брать по 0,7 долл за позицию * 10 000 = 7 000 долл). Но магазин будет "крутой" для поисковиков. Поэтому тут уже многое зависит по какой цене Вы будете покупать товар, какая аудитория покупателей и сколько Вы будете продавать. Может проще купить парсер за 50 долл (которым при необходимости Вы будете заливать новый товар к уже заведенному) и поставить баннеров и бигбордов на 950 долл (7000долл - 1000долл=6000долл экономии). Но это все мысли, на самом деле не возьмусь говорить за уникализатор - не пробовал =)
Content Downloader однозначно, у меня тоже лицензия, кстати первая программа которую я купил "честно" , свои деньги отрабатывает. Опенкарт парсить одно удовольствие, ибо структура страницы простенькая, за пол час настраиваешь шаблон, а потом просто выбирай категории и парсиш
Вы не сталкивались с такой ситуацией, когда надо спарсить картинки, но ссылка на эти самые картинки динамически меняется, вроде бы ключ подставляется какой-то. Получалось ли в таком случае копировать картинки в автоматическом режиме?
Это реально, там какой то user agent вроде бы надо заводить. Вообще там есть форум по КД и можно все выяснить, если нет, то за деньги тебе настроят все под ключ.
Привет всем! Кто-нибудь сталкивался / работал с парсером Datacol и как он по сравнению с Content Downloader? друзья, очень надо мнение знающих людей! Что выбрать Datacol или Content Downloader?
