Size: a a a

2021 July 25

S

SarcasmIO in phpGeeks
per chunk аля 200 объектов
источник

Д

Дмитрий in phpGeeks
я сленг не понял, можно пожалуйста описать что конкректно нужно, чтобы я в инете поискал, а то про батч я нашел ток с js связанное, явно не по теме. и спасибо за ответ
источник

S

SarcasmIO in phpGeeks
источник

ИП

Игорь Подольская... in phpGeeks
Парсинг. Пробую simpleHtmlDom.
Для ресурса telemetr.me.
В упор не могу спарсить, любой другой сайт норм, этот возвращает почти пустой массив.

Что может стоять на ресурсе в качестве защиты от парсинга и кто сталкивался с подобным?
источник

АВ

Артемий Владимиров... in phpGeeks
Коллеги подскажите, мультикурл в PHP имеет ли какие ограничения на одновременно выполняемые запросы? Если я запускаю 100 копий curl_multi_exec, корректно ли это отработает, а если 1000 или больше?
Есть ли где нибудь описание по этому поводу, сколько на конкретном сервере можно запускать, по каким критериям ориентироваться, в какие ресурсы это может упереться, и так далее.
источник

S

SarcasmIO in phpGeeks
посмотри запросы в консоли он на каждый чих делает аякс запрос за данными
источник

ИП

Игорь Подольская... in phpGeeks
phpQuery тоже пробовал
источник

S

SarcasmIO in phpGeeks
а я не уверен что твоя штука стоит дом дерево
источник

S

SarcasmIO in phpGeeks
шли им form data ajax запросы
источник

S

SarcasmIO in phpGeeks
там есть ендпоинты типо channel_info и тд
источник

ИП

Игорь Подольская... in phpGeeks
Возвращает вместо содержимого страницы фразу "you shall not pass"
источник

S

SarcasmIO in phpGeeks
скопируй реквест их консоли для курла и проверь
источник

S

SarcasmIO in phpGeeks
скорей всего ты не передаешь куки и необходимые параметры
источник

ИП

Игорь Подольская... in phpGeeks
Что переводится как 'Ты не пройдёшь'...
источник

S

SarcasmIO in phpGeeks
хз там не так много или сложно, достаточно передавать нужный айдишник штуки которая тебя интересует
источник

ИП

Игорь Подольская... in phpGeeks
Ну file_get_contents явно не прокатывает...
источник

S

SarcasmIO in phpGeeks
потому что используй инструменты которые подождут пока аякс скрипты с главной отработаю ( построят тебе дом дерево ) и появится контент который можно будет парсить, аля
Symfony Panther / Dom Crawler / Пупитер и прочие headless chrome
источник

S

SarcasmIO in phpGeeks
у меня все отдается
источник

S

SarcasmIO in phpGeeks
так как тебе сказал
источник

S

SarcasmIO in phpGeeks
трудно
источник