🎩
Size: a a a
2020 March 20
VB
а ну блин
Вообщем нет идей как сделать красиво?
AR
угу
AR
в экспортере этому не место мне кажется
VB
А не красиво?)
P
Парни, привет. Нужно спарсить вот этот линк
https://statonline.ru/domains?search=&create_from=&create_to=&till_from=&till_to=&owner=&strict_owner=1®filter=126&order=ASC&sort_field=domain_name_idn&tld=ru®istered=REGISTERED
Может кто-то помочь? Не получается получить весь html код. Когда открываешь с браузера, все нормально загружается, если пытаюсь получить html с помощью requests или scrapy shell, то html вытягивается не полностью. Кто-то знает в чем может быть проблема?
https://statonline.ru/domains?search=&create_from=&create_to=&till_from=&till_to=&owner=&strict_owner=1®filter=126&order=ASC&sort_field=domain_name_idn&tld=ru®istered=REGISTERED
Может кто-то помочь? Не получается получить весь html код. Когда открываешь с браузера, все нормально загружается, если пытаюсь получить html с помощью requests или scrapy shell, то html вытягивается не полностью. Кто-то знает в чем может быть проблема?
VB
динамическая прогрузка
VB
js подгружает
AR
А не красиво?)
а некрасиво я уже написал, сабкласснуть экстенжен
P
динамическая прогрузка
Все равно его ж возможно спарсить?
VB
Да, нужно использовать что-то типо браузера
VB
гугли selenium, splash
VB
а некрасиво я уже написал, сабкласснуть экстенжен
Можешь пример кода сбросить или что-то подобное, вообще не представляю как это сделать
AR
пример чего именно?
AR
как в питоне наследоваться?
AR
Все равно его ж возможно спарсить?
и в третий раз за час кидаю https://docs.scrapy.org/en/latest/topics/dynamic-content.html
VB
как в питоне наследоваться?
Нет, как сделать конкретно в этом случае
AR
не могу, это ж код писать
AR
но доступ к сеттингсам там есть
AR
какие переменные присвоить я выше уже писал