[FreeWare] Парсер товаров интернет-магазинов

Они постоянно делают какие то правки что бы закрыть возможность парсинга или хотя бы урезать объемы запросов, так чсто регулярно надо правки вносить.
В аттаче моя версия, немного доработал её в свое время на работу с проксями и кроном (отслеживать постоянно глупо, если парсишь конечно в больших объемах).
Заливаем на хост, скармливаем список ссылок и забываем на месяцок.
советую на актуальность проверить и подредактировать при необходимости.
 

Вложения

  • pr.rar
    36,8 KB · Просмотры: 75
А не вкурсе почему яшу перестал парсить?
 
вот последняя версия

Скрытое содержимое доступно для зарегистрированных пользователей!
 
как воспринимают такой контент поисковые системы?
 
Без прокси серверов яндекс реально парсить(таймаут 10 сек к примеру если выставить)?
 
Без прокси серверов яндекс реально парсить(таймаут 10 сек к примеру если выставить)?
Нет, довольно быстро банит - оставлял на ночь с задержкой 30 сек, утром уже не работал парсинг.
 
В ShopScript кто-нибудь напарсенное импортирует?
 
Назад
Сверху