Помощник
|
Как парсить подгружаемый контент при помощи curl? |
happyhand
|
Сообщение
#1
|
||
|
|
||
|
|||
r3ntg3n |
23.7.2012, 20:25;
Ответить: r3ntg3n
Сообщение
#2
|
|
Эм, ну, как вариант посмотреть профайлинг сетевых запросов в браузере и парсить не страницу, а именно адрес, по которому js-скрипт достает контент.
|
|
|
ZhukV |
26.7.2012, 16:28;
Ответить: ZhukV
Сообщение
#3
|
|
Эм, ну, как вариант посмотреть профайлинг сетевых запросов в браузере и парсить не страницу, а именно адрес, по которому js-скрипт достает контент. Так нужно делать в любом случае, так как КУРл потянет только контент страницы, а все аяксы генеряться при помощи клиентских скриптов. |
|
|
Arks |
26.7.2012, 23:39;
Ответить: Arks
Сообщение
#4
|
|
|
Как можно взять содержимое с некоторой задержкой, чтобы успел подгрузиться контент? например(кэп снова с нами!) так: взять с задержкой чтобы успел подгрузиться контент... curl не обладает такими возможностями, т.к. требуется интерпретатор javascript. selenium в помощь. либо портируйте v8 на php, либо как Вам уже подсказали(ИМХО, геморойный путь, а если там не просто данные а динамическая разметка - на php потом ее строить будете? :sarcastic:). CURL поддерживает лишь стек http и прочих протоколов, но сам информацию как браузер не обрабатывает. Короче просто спрашивает сервер и получает ответ. Вам поможет знание С или java и умение применять различные готовые решения(тот же Chromium адаптировать и использовать вместо curl для построения разметки с учетом ajax)
|
|
|
||
|
Похожие темы
Тема | Ответов | Автор | Просмотров | Последний ответ | |
---|---|---|---|---|---|
Как вы отдыхаете от работы за компом | 151 | adw-kupon.ru | 19830 | Вчера, 13:52 автор: Vmir |
|
Как вы бросили работу и перешли на заработок с сайтов? | 20 | uahomka | 3455 | Вчера, 11:54 автор: Skyworker |
|
Как в пушсетках покупают по 100-200 тысяч кликов за день? | 1 | Boymaster | 541 | Вчера, 11:45 автор: Skyworker |
|
Как вывести деньги в Украине с заблокированного Юмани ? | 30 | freeax | 5018 | 20.4.2024, 16:49 автор: Liudmila |
|
Арбитражники, как ведете учет расходов и доходов? | 13 | Boymaster | 2026 | 20.4.2024, 15:06 автор: Boymaster |
Текстовая версия | Сейчас: 24.4.2024, 15:33 |