A
Купона на кравлеру ни у кого нет?)
Size: a a a
2021 June 23
NS
Подскажите пж! При прсенги страниц я скачиваю html. Когда я смотрю результат есть повторяющие html страницы хотя по логам все нормально. Повторений не должно быть. В чем может быть проблема?
AR
сервер так отдал
AR
тебе виднее что там где повторяется
МС
"не должно быть" и "на самом деле нет" это два разных утверждения. Проверяй руками, проверяй что в парсер приходит. Всякое бывает, и сайт результаты зацикливает, и косяки в логике...
NS
Генерирую
NS
Заполняю форму и потом получаю данные
МС
ну, ооочень информативный ответ 😂
i
если видишь дебагом или лежит рядом и все-равно одинаковые страницы - бывают иногда серверы, которые генерят по сессии результаты в моменте, т.е. ты там такой радостный побежал сделал 5 запросов, а оно тебе обработало к примеру на каком-то этапе первый запрос и все последующие 5 его и отдает, помнится сервак манго таким страдал. но надо сначала четко понять, что в твоих запросах нет случайных дубликатов
AR
это ты удачно зашёл хыхы
МС
ну, группа к телеге отностится только тем, что она в ней :)
AR
дольше бота побеждал
AR
😹😹