Получить список имен файлов на сайте

[syserg]

Друзья, ну очень хочу получить список файлов (*.html, но не суть важно) на сайте (на любом, т.е. нет ни паролей не логинов к ФТП), чтобы потом считать их содержимое для своих нужд. Как это делается совершенно не вникну. По всей видимости при помощи idHTTP + рекурсия. Но куда чего и как - совершенно не ясно. Как делать перебор? Через idFTP понятно, там функции есть, а вот как иначе?

Teleport (прога) как-то же ведь получает файлы и папки (названия, размер)?

Подскажите, где и куда копать? Или может пример есть у кого-нибудь?

[prizrak1390]

Teleport, анализирует контент html страницы,находит ссылки на сторонние страницы,скачивает их и по аналогии дальше.
Кажется способа узнать каталоги и файлы на сервере - нету.

[syserg]

Т.е. он, грубо говоря, открывает index.html и вперд! по ссылкам?

[prizrak1390]

syserg, логично предположить. А иначе только представь, как легко было бы взламывать сайты или другие веб-сервисы имея карту папок\ресурсов\файлов и тп. Хакерам бы проще жилось

[syserg]

Представить конечно сложно, но, например, php будет из базы генерить ссылки на страницы в каталоге (А), а страницы (пусть их сотня) в этом каталоге не будут иметь ссылок между собой. А мне нужны именно эти страницы.

Можно ли сделать следующим образом: в TWebBrowser я загружу страницу, содержащую все ссылки (которая генерится на сервере), т.е. получу собственно все страницы в каталоге, которые между собой не связаны, и уже с ними буду работать?

Да, и еще вопрос, реально будет узнать размер файла(ов) каталога, атрибуты и пр. инфу?

[prizrak1390]

Представить конечно сложно, но, например, php будет из базы генерить ссылки на страницы в каталоге (А), а страницы (пусть их сотня) в этом каталоге не будут иметь ссылок между собой. А мне нужны именно эти страницы.

Очень жаль....Но мне кажется эти страницы окажутся за пределами "видимости"

Можно ли сделать следующим образом: в TWebBrowser я загружу страницу, содержащую все ссылки (которая генерится на сервере), т.е. получу собственно все страницы в каталоге, которые между собой не связаны, и уже с ними буду работать?

Ну если в данной странице будут ссылки на другие страницы, то конечно ты сможешь с ними работать.

Да, и еще вопрос, реально будет узнать размер файла(ов) каталога, атрибуты и пр. инфу?

Ну вот скачал ты исходник старницы. Взвесь его. И получишь размер КОДА html страницы. А что бы еще и оценивать вместе с скриптами и картинками, придется немножко попотеть. Узнать атрибуты, я честно ненаю как...

[syserg]

насчет "взял исходник, узнал размер". Я думаю имеет ли смысл его брать? Вроде бы можно прочитать прям сервера (не откачивать себе). Да, а вот дата создания файла нужна бы.

[prizrak1390]

Вроде бы можно прочитать прям сервера (не откачивать себе).

Это как? Ведь, что бы работать с данными тебе нужно их получить, а значит скачать, верно? Просто ты можешь например не скачивать страничку явно, а работать с ней напрямую,но при этом ты все равно будешь качать страничку. Но имхо, удобнее сначала её сдуть и потом уже работать с "локальной" версией страницы. Тут тебе и скорость и удобство.

[syserg]

ос. Спасибо. Попробую