[Архив] Lynx parser

Статус
В этой теме нельзя размещать новые ответы.
Чего-то я не пойму как он работает. Исправил строку для Гугла. Добавил признаки. Запустил. Выдало:

Count of urls: 1144360

SHOW LOG File - 1 -------------------> 1144360 urls


Жму LOG File - 1 - выдает 404 ошибку.

При этом на мыло ничего не приходит. И где все эти УРЛы искать?
 
В папке pars/google
там должны быть txt файлы с урлами
 
Кто знает почему он в админке статистику не показывает,
последствия дезенда?
 
Какая именно статистика?
У меня вначале не были видны файлы с результатами парсинга. Точно не помню, т.к. давно менял, но вылечилось вроде бы заменой строки 13 в function.php на
PHP:
while (($e = readdir ($d)) !== false)
вначале там что-то было без скобок.
Если же про логи во время работы, то смотри права на папки.
 
Какая именно статистика?
У меня вначале не были видны файлы с результатами парсинга. Точно не помню, т.к. давно менял, но вылечилось вроде бы заменой строки 13 в function.php на
PHP:
while (($e = readdir ($d)) !== false)
вначале там что-то было без скобок.
Если же про логи во время работы, то смотри права на папки.
Респект, именно то что нужно.

:)
 
все равно линкс не радует :(
по одним и тем же запросам он собрал 80К кеев, а мой самописный парсер - уже 1.2М и треть задач еще осталась

а всё дело в одной маленькой темке... какой - не скажу ;)
 
КоЛИСЬ :thenks:
 
все равно линкс не радует :(
по одним и тем же запросам он собрал 80К кеев, а мой самописный парсер - уже 1.2М и треть задач еще осталась

а всё дело в одной маленькой темке... какой - не скажу ;)

говори, здесь все друг другу подсказывают, ибо это правильный форум

Добавлено через 1 минуту
заодно и этот парсер подправим здесь, чтобы дергал больше, и будет называться Lynx parser Edition nulled.ws
 
все равно линкс не радует :(
по одним и тем же запросам он собрал 80К кеев, а мой самописный парсер - уже 1.2М и треть задач еще осталась

а всё дело в одной маленькой темке... какой - не скажу ;)

поддерживаю вишевыразившихся в плане: зачем в принципе говорить "я знаю как надо делать, но никому не скажу". это травмирует души читателей
 
Статус
В этой теме нельзя размещать новые ответы.
Назад
Сверху