Size: a a a

2020 May 02

К

Кирилл in Scrapy
Потому что asyncpg на asyncio, а скрапи на twisted. Поддержка асинхрона пайтона только недавно начала водиться в скрапи
источник

b

blessed in Scrapy
Кирилл
Потому что asyncpg на asyncio, а скрапи на twisted. Поддержка асинхрона пайтона только недавно начала водиться в скрапи
Спасибо
источник

EB

Elisei Badanin in Scrapy
где, кроме fineproxy, можно купить нормальные прокси?
источник

G

Georg in Scrapy
Кирилл
так и в чем вопрос?)
Не знаю с чего начать
источник

К

Кирилл in Scrapy
Georg
Не знаю с чего начать
Нужно как-то конкретнее)
источник

G

Georg in Scrapy
Кирилл
Нужно как-то конкретнее)
Да просто не знаю с чего подступиться)
Начинаю писать, выходит говнище(
источник

G

Georg in Scrapy
Georg
Да просто не знаю с чего подступиться)
Начинаю писать, выходит говнище(
Крч надеюсь, что подтолкнете в сторону, где можно изучить лучше асинхронную работу в парсерах...
источник

G

Georg in Scrapy
Может есть примеры какие-нибудь?
источник

К

Кирилл in Scrapy
Ну, посмотри как скрапи устроен, чем тебе не асинхронный парсер. Посмотри ruia еще
источник

AS

Alexander Serebrov in Scrapy
Elisei Badanin
где, кроме fineproxy, можно купить нормальные прокси?
Crawlera 😅
источник

G

Georg in Scrapy
Кирилл
Ну, посмотри как скрапи устроен, чем тебе не асинхронный парсер. Посмотри ruia еще
ruia, вроде бы что надо, спасибо👌
источник
2020 May 03

b

blessed in Scrapy
Elisei Badanin
где, кроме fineproxy, можно купить нормальные прокси?
Под что?
источник

EB

Elisei Badanin in Scrapy
обычные серверные
источник

b

blessed in Scrapy
Elisei Badanin
обычные серверные
https://sockshub.net мне норм ( большие объемы, регаю аутлуки)

https://proxy.am/ - по скромнее, пол года назад были не сильно заюзанные.

Думаю везде можно тесты взять, попробовать.
источник

EB

Elisei Badanin in Scrapy
Спасибо
источник

b

blessed in Scrapy
Elisei Badanin
Спасибо
Забыл, у RSOCKS был шаред пакет за 10 баксов в месяц. Вот они лучше чем shared fineproxy (во всяком случае пол года назад были).

Но другие паки я бы не советовал у них.
источник

G

Genadyi in Scrapy
Есть аналоги то файнпрокси?
источник

G

Genadyi in Scrapy
Они вроде единственные такие дешёвые
источник

G

Genadyi in Scrapy
И вроде не такие плохие
источник

EB

Elisei Badanin in Scrapy
rsocks как-то непонятно, вроде и работает, но не со всеми сайтами(имею ввиду не бан, а скорость)
источник