Size: a a a

2019 July 15

E

Evgen in Scrapy
смотрите в dev tools откуда контент грузится когда кликаете по ссылке страницы
источник

РТ

Ренат Турсунбаев in Scrapy
Evgen
смотрите в dev tools откуда контент грузится когда кликаете по ссылке страницы
Как это отследить?
источник

E

Evgen in Scrapy
открыть chrome developer tools вкладка network, нажать на ссылку и посмотреть, что там появится
источник

РТ

Ренат Турсунбаев in Scrapy
Происходит интересный эффект - основная страница останется такая же, jsом подгружается (визуально) новая информация, в действиях появляется ссылка, на доли секунды и пропадает.
источник

РТ

Ренат Турсунбаев in Scrapy
В итоге исходный код страницы остаётся таким же, а отображается другое
источник

E

Evgen in Scrapy
ну вы галочку поставьте, чтоб ссылка не пропадала
источник

E

Evgen in Scrapy
preserve log
источник

РТ

Ренат Турсунбаев in Scrapy
Ага, кое что проясняется, благодарю!
источник

AB

A B in Scrapy
какие лёгкие бекенды key-value посоветуете, чтоб хоронить полученные данные?
источник

s

serhii in Scrapy
редис?
источник

AB

A B in Scrapy
пока сильно круто, я никогда с ним не работал. в идеале бы пока что-то совсем маленькое, чтобы быстро накидать для домашнего проекта.
источник

AB

A B in Scrapy
нашёл такие штуки: pickleDB, pickleshare, ZOBD, tinyDB, shelve
источник

s

serhii in Scrapy
A B
пока сильно круто, я никогда с ним не работал. в идеале бы пока что-то совсем маленькое, чтобы быстро накидать для домашнего проекта.
memcached?
источник

AB

A B in Scrapy
было бы отлично
источник

s

serhii in Scrapy
A B
было бы отлично
Он проще редиса, кстати. Мемкэшд
источник

AB

A B in Scrapy
ох ты, memcached это продукт, а не свойство.
источник

s

serhii in Scrapy
A B
ох ты, memcached это продукт, а не свойство.
Не понял ;)
источник

AB

A B in Scrapy
я думал, что это вопрос, хочу ли я что-то кеширующиеся/находящиеся в памяти.
источник

AB

A B in Scrapy
просто не знал, что это собственное имя.
источник

N

Nik in Scrapy
Добрый день. Мне посоветовали обратиться в эту группу по поводу парсинга. Мне нужно сделать парсинг двух баз данных - одной российской, второй международной. По российской базе тех задание готово. По международной тех задание не делали, хотим обсуждать устно по результатам работы по российской базе. Нужен человек из Москвы, чтобы иметь возможность встречаться. Остальные вопросы в личные сообщения. Спасибо
источник