Всем привет, мой скрапер(бот) в какой-то момент зациклился и перестал работать,
резко возрасла нагрузка с 2% до 17% из-за того что я написал следующий паттерн: exist_https = re.compile(r'(^https?:\/\/([\da-z\.-]+)\.([a-z\.]{2,6})([\/\w \.-]*)*\/?$)'),
под который попалась ссылка длинной 359 символов.
( т.е.
re.search(exist_https, link) вернет объект следовательно True и т.д. ... )
Что у меня не так с паттерном, или подобные паттерны не рассчитаны на большие данные (359 символов) ?
М.б. кто хочет, поправит меня, даcт совет по поводу регулярок...?