C
Или через if стейтмент
Если Пагинация А, парсить так
в противном случае парсить Б
Если Пагинация А, парсить так
в противном случае парсить Б
Size: a a a
2020 March 14
B
что-то я завис, не получается переходить по пагинации, в amazon, для 1 страницы селектор другой, начиная от 2 ... одинаковый. Как решить такую проблему?
Взять два селектора
🎱
Или через if стейтмент
Если Пагинация А, парсить так
в противном случае парсить Б
Если Пагинация А, парсить так
в противном случае парсить Б
Понял, тоже вариант с 2 селекторами получается ?
🎱
Взять два селектора
И просто if ом обработать ?
AR
Да
C
Понял, тоже вариант с 2 селекторами получается ?
Ну раз есть 2 и больше страниц где селекторы отличаются то просто нужно отловить нужный
C
Найти обе страницы, вытащить оба адреса и пробовать оба на каждой странице
A
В чем прикол. На линуксе парсинг не работает, на виндовсе работает
A
В виндовсе 200 ответ и находит хпатч в линуксе не находит 200
C
как вы чистите урлы ? обычным strip или urlparse больше подходит для этого?)
Что значит чистим урлы
К
/Bounty-Quick-Size-Paper-Towels-Family/dp/B079VP6DH5/ref=sr_1_1?dchild=1&qid=1584184338&s=kitchen-intl-ship&sr=1-1"
например, мне нужно до ref взять урл
оно идет вместо с скрапи, так что сразу импортируешь и используешь, устанавливать не нужно
https://w3lib.readthedocs.io/en/latest/w3lib.html#w3lib.url.url_query_cleaner
https://w3lib.readthedocs.io/en/latest/w3lib.html#w3lib.url.url_query_cleaner
🎱
оно идет вместо с скрапи, так что сразу импортируешь и используешь, устанавливать не нужно
https://w3lib.readthedocs.io/en/latest/w3lib.html#w3lib.url.url_query_cleaner
https://w3lib.readthedocs.io/en/latest/w3lib.html#w3lib.url.url_query_cleaner
спасибо, полезно) свой велосипед писать не хочется