Парсер с CloudFlare

Zacker2

Гуру форума
Регистрация
19 Фев 2013
Сообщения
242
Реакции
75
Написали парсер, запускаем на сервере который работает через CloudFlare(наш сервер), и через 30-40 сек. наш сервер выводит страницу CF, присваивает моему ip ид номер, и соответственно останавливается парсинг. Error 524
Тайм аут на обработку каждой ссылки на секунду стоит, как переписать php чтобы CF пропускал? Допустим рассылка электронных писем с XenForo через этот же сервер выполняется без всяких Error 524.
 
Написали парсер, запускаем на сервере который работает через CloudFlare(наш сервер), и через 30-40 сек. наш сервер выводит страницу CF, присваивает моему ip ид номер, и соответственно останавливается парсинг. Error 524
Тайм аут на обработку каждой ссылки на секунду стоит, как переписать php чтобы CF пропускал? Допустим рассылка электронных писем с XenForo через этот же сервер выполняется без всяких Error 524.

То есть Вы предполагаете, что кто-то, не видя исходников, сможет их подправить или даже переписать?
Вы немного ошиблись адресом, Вам сюда: Для просмотра ссылки Войди или Зарегистрируйся
 
Проблема решена, оказалась это из-за постоянного рефреша которые клоуд понимал как атаку. Достаточно было закрыть браузер после запуска.
Что же касается куда мне идти, то судя по ссылке вы оттуда, нельзя всех мерить своими мерками...
 
Назад
Сверху