Size: a a a

2020 March 15

B

Bulatbulat48 in Scrapy
Кирилл
Да, а то сам видишь: нужно сайт парсить. А что за сайт?  Такой-то. А что спарсить?  И то и это.  А сколько платишь?
ок
источник

EB

Elisei Badanin in Scrapy
в скрапиджобсе…но какой сайт итд лучше не публиковать открыто + бывает несколько сайтов…а вот примерный бюджет не помешает
источник

К

Кирилл in Scrapy
А что секретного в сайтах
источник

EB

Elisei Badanin in Scrapy
ну малоли, кто-то хочет пентагон заддосить
источник

К

Кирилл in Scrapy
Elisei Badanin
ну малоли, кто-то хочет пентагон заддосить
Так тогда сразу будет видно, и не нужно будет на таких людей время тратить
источник

EB

Elisei Badanin in Scrapy
ну и бывает нужно несколько сайтов спарсить
источник

К

Кирилл in Scrapy
Сразу несколько писать)
источник

EB

Elisei Badanin in Scrapy
ну и спарсить, это не самое сложное, а еще может быть какая-то обвязка к парсеру
источник

EB

Elisei Badanin in Scrapy
в итоге нужно все тз писать
источник

EB

Elisei Badanin in Scrapy
а вот писать какой-то примерный бюджет или вилку не помешает
источник

EB

Elisei Badanin in Scrapy
условно “написать парсер за 500р” и “написать парсер за 5000” это разные аудитории, а и сколько не отвечал, там все за 500р хотят
источник

К

Кирилл in Scrapy
Elisei Badanin
условно “написать парсер за 500р” и “написать парсер за 5000” это разные аудитории, а и сколько не отвечал, там все за 500р хотят
Так я об этом и говорю. Что, что чем подробнее изначально будет заказ, тем меньше мы все потратим своего времени и нужные люди найдут друг друга.
И можно понять, что когда человек первый раз делает  заказ он может не знать, какая именно инфа интересует исполнителья
источник

EB

Elisei Badanin in Scrapy
Нет, ну я согласен, что какое-то описание нужно, но писать все ТЗ тоже не очень удобный вариант
источник

К

Кирилл in Scrapy
И если несколько сайтов, возможно у кого-то уже есть готовый парсер
источник

EB

Elisei Badanin in Scrapy
которые уже были проданы кому-то?)
источник

К

Кирилл in Scrapy
Да
источник

К

Кирилл in Scrapy
Но если ты заключил договор на передачу прав, то конечно так лучше не делать
источник
2020 March 16

SS

Sergey Sergey in Scrapy
Привет! Подскажите плиз, как дать понять скрейпи, что страница собрана неверно и ее надо обойти еще раз, например, используя другой прокси?
источник

SS

Sergey Sergey in Scrapy
Sergey Sergey
Привет! Подскажите плиз, как дать понять скрейпи, что страница собрана неверно и ее надо обойти еще раз, например, используя другой прокси?
Помню, что был флаг какой-то, который scrapy-proxy давал понять, что прокси забанен и нужно взять новый и пройтись еще раз
источник

К

Кирилл in Scrapy
Определяешь, по каким признакам можно понять, что "неверно", делаешь if и йелдишь новый реквест с dont_filter=True, потом return чтоб дальше код не исполнятся
источник