URL: https://www.opennet.me/cgi-bin/openforum/vsluhboard.cgi
Форум: vsluhforumID9
Нить номер: 9951
[ Назад ]

Исходное сообщение
"эмуляция браузера"

Отправлено Alex , 12-Дек-14 17:02 
есть программка curl
позволяет отправлять http запросы на веб сервер.

так вот если выполнить curl home.ru
будет скачен один файл, чаше всего это index - что то.

если зайти на этот сайт из браузер,
то запросов будет куда больше.
как минимум добавиться запрос на получении иконки,
на скачивание всех файлов-картинок и так далее.

вопрос:
curl умеет сам автоматически выполнять кучу запросов как браузер (исходя из содержимого index файла) или мне надо самому парсить index файл и отправлять запрос на каждую картинку вручную через скрипт?

спасибо.


Содержание

Сообщения в этом обсуждении
"эмуляция браузера"
Отправлено F , 12-Дек-14 17:33 
> вопрос:
> curl умеет сам автоматически выполнять кучу запросов как браузер (исходя из содержимого
> index файла) или мне надо самому парсить index файл и отправлять
> запрос на каждую картинку вручную через скрипт?

wget? phantomjs?