S
Size: a a a
2021 June 16
МС
я, примерно так и делаю, в пайпе
O
На время разгадывания капчи, паука лучше на паузу ставить?
O
Капча зависит от количества запросов в день? Или как?
AR
никак не узнать как настроена защита
AR
вряд ли в день, скорее в час или чаще
AR
ну и не только от количества запросов может быть
O
Например?
AR
детект небраузерных клиентов
A
Так работает:
input_file = r'in.xml'
output_file = r'out.xml'
replacements = {'"': '"',}
with open(input_file, 'r') as in_file, open(output_file, 'w') as out_file:
for line in in_file:
for search_for in replacements:
replace_with = replacements[search_for]
line = line.replace(search_for, replace_with)
out_file.write(line)IP
Продолжаю рубрику тупых вопросов. Делаю ротацию прокси, всё как указано в документации scrapy-rotating-proxies. Оправляю тестовые запросы к checkip.dyndns.org, на выходе получаю один и тот же IP. С чем может быть связано, что прокси не включаются в работу?
МС
лог что говорит? прокси, вообще, используются?
IP
Спасибо, уже разобрался. На стороне прокси была проблема.
М
У сайта интерфакс кодировка стоит Windows-1251, я чуть не упал)
O
Профи, можете скинуть сайты на которых можно практиковаться и наращивать свои навыки. Заранее спасибо
МС
какого рода сайты? с защитой - попробуй инсту распарсить, или линкед