М
Size: a a a
2020 May 01
R
Хотя взрослому дядьке нечего делать на фрилансе
Я пару дней назад просматривал Upwork какие проекты постят, просто интересно какие проеты вообще - ничего интересного не увидел хотя с радостью че нить зафигачил интересное. Потому на фрилансе не только молодежь - но и поиск каких нить интерсных проектов
i
Ребята я так понял если выкинуть БС4 то работать будет побыстрее? Тк можно и без него тк он и не нужен он просто работу упрощает? И голыш lxml лучше?
я предпочитаю импортить parsel, и его юзать. если бс4 выкинуть то да, будет быстрее. Но не намного, я примерно в 1.5-2 раза получал ускорение на частном случае.
MV
Если нужно авторизоваться на сайте и перейти на несколько страниц, то лучше юзать селениум ?
i
зависит от сайта и того, насколько ты хочешь углубляться в тему. и какая скорость тебе нужна (и какую либу-фреймворк ты для дальнейшего скрапинга используешь) можно пост-запросом в requests залогиниться, примерно таким же макаром в скрапи, посмотрев какие поля заголовков страница в браузере шлет сайту при логине через copy as curl.
MV
Посмотрю, спасибо
TK
Добрый вечер, Подскажите, пожалуйста, почему функция parse может не делать return планируемого когда перед ней присутствуют конструкции
yield response.follow(url_product, callback=self.add_sku_and_save_result)?
TK
Паук заканчивает обработку, но так и не возвращает в конце