Можно ли получить список файлов на заданном url? Cтандартные функции работы с поиском файлов предназначены для протоколов ftp & gopher, а для http нет.
HTTP не предусматривает такую возможность, просто иногда сервер генерирует HTML-страничку со списком или часть файлов можно получить из гиперссылок и URI-ресурсов внутри других страниц на сервере.
В том то и дело что ссылки могут быть не на все файлы, а даже для такого скана нужен синтаксический анализатор. Можно ли получить эту самую сгенерированную страничку? Я знаю тип файлов которые мне нужно увидеть на серваке, это что-нибудь дает(отправка спец. загаловков с типами файлов)?
NoName Quantum правильно сказал -- в HTTP нет средств получения листинга. Списки файлов, которые ты видишь в браузере -- это динамически генерируемые HTML-странички (если, конечно, директория на листниг не закрыта). Так что если нужен листинг файлов -- анализируй html... Страничку эту можно получить обратившись не к файлу, а к директории. Если её нет -- значит так настроен веб-сервер и ты её никак не получишь.
