Закачка по протоколу https файлов когда их число и названия заранее неизвестны
Собственно есть сайт на котором размещаются шифрованные файлы с платежами (то есть заранее неизвестно сколько их там и как они называется). Необходимо забирать эти файлы с помощью написанной программы, сохранить на диск и обрабатывать их определенным образом. Обработку написать не сложно, а вот как забрать набор файлов? Пробовал libcurl и один файл с известным именем забрать несложно, но как забрать их все? Может кто-то уже писал что-то подобное?
https это тот же самый http только по SLL, и следовательно надо формировать GET/POST запрос на выдачу сервером файла. Что бы определить какие файлы доступны, надо загрузить всю страницу загрузки файлов, распарсить ее на предмет ссылок на нужные файлы и формировать GET/POST запросы уже с нужными ссылками.
И все это при условии что листинг файлов не запрещен в настройках сервера.