UC
А селениум без веб драйверов работает?
Size: a a a
2020 March 22
СТ
+ нужно иметь ввиду что селениум гораздо медленнее чем splash, судя по тем отзывам которые мне попадались
AR
это как?
🎅B
Тогда всё-таки начну со сплеша
🎅B
+ нужно иметь ввиду что селениум гораздо медленнее чем splash, судя по тем отзывам которые мне попадались
Спасибо
СТ
Тогда всё-таки начну со сплеша
разобрался как достать данные про коронавирус?
🎅B
разобрался как достать данные про коронавирус?
Не совсем. Там ьакая проблема, что в видео у него появляется еще один ответ, когда он кликает на школа, а на сайте короны только один файл json. И я так и не смог спарсить
СТ
Так он вглубь парсит
СТ
А тебе достаточно забрать json с первой страницы
🎅B
Да, но я не понял, как мне взять только то, что есть
СТ
Ну просто не делать ещё один шаг вглубь а сделать как у него последняя в цепочке функция parse работает
СТ
Я почти уверен что тебе не нужен splash, судя по тому что было видно на том сайте который ты парсишь
🎅B
Это да, но думаю не будет лишним поучить его
🎅B
Но сначала спаршу этот сайт
2020 March 23
🎅B
Я чет туплю, помогите
Ошибка -
Код - https://nekobin.com/hixovusowo
Ошибка -
File "C:\Users\USER\scrapy_projects\corona_parser\corona_parser\spiders\corona_parser.py", line 33, in parse_stats
'region': data['region'],
TypeError: list indices must be integers or slices, not str
Код - https://nekobin.com/hixovusowo
🎅B
Насколько я понял, ему не нравится, что результат будет строчкой
МС
Строка 30, а там точно не response.text ?
🎅B
Строка 30, а там точно не response.text ?
В туторе было
response.body. Но попробую text написатьСТ
у тебя там весь файл json из множества объектов с параметрами region, cases, death
СТ
могу предположить что он просто не понимает какой из них брать