А что с ними?

Огромное вам @username_too_short спасибо!

говно на говне

погоди, это еще не все

Ok )

+ полазь там у него по блогу, там много разного интересного

вот тут можно практиковаться
http://toscrape.com/

Благодарю!

вот тут есть вк апи и немного кроулинга
https://www.coursera.org/learn/python-for-web

вот тут анализ и отрисовка
https://www.coursera.org/learn/python-for-data-science

в целом алогритм работы практически всегда одинаковый
- проводим разведку, смотрим есть ли ваф, трекалки, идем в роботс
- проверяем запросы в девтулзах, вполне возможно что ничего делать не надо т.к. оно или прямо жсоном передается, или есть незадокументированное апи
- проверяем на жс, если много всякого жс зависимого говна, то используем селениум. меньше жс говна или нет жс - скрэпи
- смотрим что тригерит капчу, делаем так чтобы капча не тригерилась. всегда если есть возможность не тригернуть капчу, то лучшее ее не тригерить, чем постоянно тыкаться в антигейты и ocr
- запасаемся региональными прокси, юа ротейтом, вычисляем делей

А на что задержка вычисляется?

на запросы

сколько запросов можно сделать до того как тебе кинут бот детекшн

Всё. Понял!

если не будешь использовать скрэпи, то тебе надо будет еще разбираться как это все распаралелить через торнадо, думать про делей, пагинацию и еще много чего

Буду

и захвати еще какой-то креш курс по регуляркам

Меня жестко поимели. Не хочу повторения. Задело...