The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

форумы  помощь  поиск  регистрация  майллист  вход/выход  слежка  RSS
"эмуляция браузера"
Вариант для распечатки  
Пред. тема | След. тема 
Форум Программирование под UNIX (Shell скрипты)
Изначальное сообщение [ Отслеживать ]

"эмуляция браузера"  +/
Сообщение от Alex (??) on 12-Дек-14, 17:02 
есть программка curl
позволяет отправлять http запросы на веб сервер.

так вот если выполнить curl home.ru
будет скачен один файл, чаше всего это index - что то.

если зайти на этот сайт из браузер,
то запросов будет куда больше.
как минимум добавиться запрос на получении иконки,
на скачивание всех файлов-картинок и так далее.

вопрос:
curl умеет сам автоматически выполнять кучу запросов как браузер (исходя из содержимого index файла) или мне надо самому парсить index файл и отправлять запрос на каждую картинку вручную через скрипт?

спасибо.

Ответить | Правка | Cообщить модератору

Оглавление

Сообщения по теме [Сортировка по времени | RSS]


1. "эмуляция браузера"  +/
Сообщение от F on 12-Дек-14, 17:33 
> вопрос:
> curl умеет сам автоматически выполнять кучу запросов как браузер (исходя из содержимого
> index файла) или мне надо самому парсить index файл и отправлять
> запрос на каждую картинку вручную через скрипт?

wget? phantomjs?

Ответить | Правка | ^ к родителю #0 | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема




Партнёры:
PostgresPro
Inferno Solutions
Hosting by Hoster.ru
Хостинг:

Закладки на сайте
Проследить за страницей
Created 1996-2024 by Maxim Chirkov
Добавить, Поддержать, Вебмастеру