Size: a a a

2021 April 26

MA

Murilo Andrade in Scrapy
Some time ago I developed a solution in selenium which works very well, but selenium is a little slow and I've studied libraries like bs4, request, none found a solution that solved the problem of rendering pages by javascript, the only one to solve was selenium. Could someone answer me, if it is possible to scrape data from the web without needing selenium to render pages on account of javascript.
источник

AR

Andrey Rahmatullin in Scrapy
источник

MA

Murilo Andrade in Scrapy
sorry for the english mistakes, i got help from the translator
источник

МС

Михаил Синегубов... in Scrapy
many people do it here :))
источник

r

rink0 in Scrapy
Вот у меня крик души. Здесь много людей у которых основная работа это парсинг и автоматизация. У вас не было такого что вы хотели послать этот парсинг и автоматизацию куда-то подальше и сидеть спокойно писать, к примеру, бэкенд для сайта?
источник

К

Кирилл in Scrapy
Ты просто устал
источник

К

Кирилл in Scrapy
Бэк тоже иногда задалбывает, там нет ничего особо хорошего
источник

r

rink0 in Scrapy
Ну я могу опять же ошибаться (ибо с бэком кроме одного момента, ваще не работал)
Но вот там нет нерешаемых проблем. Все моментом можно загуглить.

А тут чуть что и тебе нужно чтобы клиент был на связи. Ибо Фейсбук не даёт почему то зайти. И сейчас вот эта блокировка. Поставила под вопрос целесообразность моей работы.

Но и да я устал, но от того что не могу закончить никак первый проект на первой работе. Из-за вот таких ньюансов. За день могу проработать всего пару часов. Потому что нужно будет что то узнать от клиента или код получить какой-то(а он с противоположным часовым поясом)
Мой эстимейт был на 5 дней( и 27 часов в работе)
В итоге три недели и за эти три недели я проработал всего 31 час
источник

К

Кирилл in Scrapy
Это еще неплохо, у меня бывало и хуже
источник

r

rink0 in Scrapy
Хех)
источник

К

Кирилл in Scrapy
Просто найди еще заказы
источник

r

rink0 in Scrapy
Я в апворк конторе работаю
источник

r

rink0 in Scrapy
источник

r

rink0 in Scrapy
Это наверное и ошибка, джуну в апворк контору идти
источник

SK

Semyon Krutolevich in Scrapy
Допустим мой можешь взять😂😁
источник

r

rink0 in Scrapy
Я конечно изначально думал круто! Не нужно с заказчиком напрямую общаться. Но это оказалось минусом, чем плюсом
источник

r

rink0 in Scrapy
Ахахаха
источник

SK

Semyon Krutolevich in Scrapy
Я не понял, когда новые посты в твоём канале будут?
источник

A

Andrii in Scrapy
Апворк прямо на сам апворк?
источник

r

rink0 in Scrapy
Пока не знаю о чем писать -.-
источник