Size: a a a

2020 October 18

К

Кирилл in Scrapy
Должно быть User-Agent
источник

A

Andrii in Scrapy
Кирилл
Должно быть User-Agent
Но ето какой-то експерементал фича, мобайл емулейшен
источник

A

Andrii in Scrapy
Кстати просто бомба делать скриншот так, может кому надо будет
источник

К

Кирилл in Scrapy
может быть это свойство
источник

К

Кирилл in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
Andrii
Имею ввмду что пишет userAgent, а не user-agent
Это же не хедеры
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
Ребят, а по супу есть такой же чат?
источник

B

Bulatbulat48 in Scrapy
𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄
Ребят, а по супу есть такой же чат?
не припомню чтобы упоминали, обычно просто тут спрашивают вопросы по супу
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
Bulatbulat48
не припомню чтобы упоминали, обычно просто тут спрашивают вопросы по супу
Тогда вопрос, есть ли в супе метод аналогичный скрэппи.
В скрэпи можно после поиска через селектор применить get_all() (указав перед этим ::text в селекторе) и получить список текстов на выходе.
Есть какая-то аналогия в супе? Не хочется что-то после получения списка из 4-5 элементов, писать на каждый list[0].get_text(), чтобы получить тесты. Есть что-то аналогичное? тип get_all_text() какой-нибудь
источник

К

Кирилл in Scrapy
𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄
Тогда вопрос, есть ли в супе метод аналогичный скрэппи.
В скрэпи можно после поиска через селектор применить get_all() (указав перед этим ::text в селекторе) и получить список текстов на выходе.
Есть какая-то аналогия в супе? Не хочется что-то после получения списка из 4-5 элементов, писать на каждый list[0].get_text(), чтобы получить тесты. Есть что-то аналогичное? тип get_all_text() какой-нибудь
Вроде бы там такого нет. Потому что это именно фишка parsel, как псевдо элемент. Но не думаю, что это большая проблема вызвать map на список, всё равно такие циклы где-то есть, спрятаны они или нет. У тебя маленький список, так что сильно переживать о скорости и оптимизации не стОит
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
Ооооо, точно, map, сейчас попробую, если я правильно понял
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
Кирилл
Вроде бы там такого нет. Потому что это именно фишка parsel, как псевдо элемент. Но не думаю, что это большая проблема вызвать map на список, всё равно такие циклы где-то есть, спрятаны они или нет. У тебя маленький список, так что сильно переживать о скорости и оптимизации не стОит
не, я, видимо, тупой)
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
pm_op1 = list(map(get_text(), pastbox.select('.standard-box:nth-child(1) .opponent .text-ellipsis')))
источник

𝕾

𝕾𝖔𝖚𝕷𝕭𝖆𝕯𝕲𝖚𝖄... in Scrapy
он не знает, что такое get_text() её как-то без импорта можно вставить?
источник

AR

Andrey Rahmatullin in Scrapy
пиши лямбду
источник

AR

Andrey Rahmatullin in Scrapy
точнее тут просится лист компрехеншен конечно
источник
2020 October 19

Asen Баал in Scrapy
Как мне получить только iframe с js-relap?
источник

Asen Баал in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
чем получить?
источник

К

Кирилл in Scrapy
Asen Баал
document.querySelectorAll('iframe.js-relap-widget')
источник