[PHP] URL адреса всех страниц сайта

[Tima111]

Нужно узнать URL адреса всех страниц сайта...
Сначало думал запросом через гугл или яндекс парсить все страницы в выдаче. Но их может там и не быть и парсить можно только по 1000 (результаты выдачи...). Вариант с поисковиками не подходит .
На сайте больше 200тыс. страниц.
Как это можно сделать средствами PHP?

 

[a1ien.n3t]

Ну для начала.
1) просто так узнать адрес всех страниц просто НЕВОЗМОЖНО )(это негде не храниться.)
Старница просто генерируеться в зависимости от параметров переданных ей(а способы передачи могут быть разные, от просто GET запроста до куков, сессий, значений в БД...
2)Единственное что можно сделать это записывать варианты обращения.
Но врядли что-то это даст.
В общем случае ответ на ваш вопрос НИКАК.

 

[Tima111]

a1ien.n3t, спасибо.
Сразу не воспользовался поиском по форуму
Поискал в темах ниже и нашёл десктопную программу, сейчас буду пробовать.
Ещё нашёл и PHP скрипт, тоже попробую.
Сюда выложу всё (может кому пригодится
Для просмотра ссылки Войди или Зарегистрируйся от участника этого форума: Для просмотра ссылки Войди или Зарегистрируйся
Десктопный вариант: Для просмотра ссылки Войди или Зарегистрируйся, спасибо за подсказку Для просмотра ссылки Войди или Зарегистрируйся

 

[Mutant]

Есть десктопная прога (free), предназначенная для аудита всех страниц сайта на предмет ошибок, битых ссылок, etc. Так вот, она замечательно собирает все страницы сайта по уровням вложенности.

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.

Для просмотра ссылки Войди или Зарегистрируйся

 

[_Napster_]

А если попробовать программой типа WebZip или схожей с ней?

 

[Tima111]

Попробовал и скрипт и программу...
Скрипт вообще не рабочий оказался. Программа сканирует сайт, но очень медленно.
Mutant, огромное спасибо!
Это то что я искал. И скорость хорошая.
_Napster_, спасибо, не пробовал ещё, но тоже скачаю потестирую.