Как парсить innerHTML?

теперь уже по пакетированию вопрос. я всё это как-то обходил столько лет стороной, так как сложных вещей не делал. не обессудьте за простой вопрос про питон.

вот такой кейс: создал через scrapy  проект и он рабочий. структура директорий такая: Y/Z/spiders. через тот же скрапи запускаются пауки, всё хорошо. если добавить это дерево каталогов в мой сторонний проэкт (X/Y/Z/spiders), то чтобы запускать паука из X, нужно добавить в Y __init__.py и поправить все импорты добавив Y. но после этого, паука не запустить через scrapy runspider.

как бы и рыбку съесть и через runspider запускать?

Обернуть собственно в пакет чтобы не заниматься фигнёй с копированием папок руками.

как это делается? я думал, что создав в директории __init__.py я уже сделал пакет

я не разумлю этот момент вообще.

Подскажите как с помощью python вытащить данные из local storage Chrome

Packaging guide, там всё есть.
Если вкратце сетап.пай позволит тебе устанавливать свои пакеты куда ты хочешь, например в другие свои проекты.
Такой же механизм как и с установкой самого скрапи, ты же не копируешь код скрапи себе в проект, ты его через pip install skrapy ставишь. Так же можно и со своим кодом.

А, я не так вопрос прочитал.

Сори, пойду ка я спать.

Если не решишь пингуй завтра.

ночь длинная, пошуршу

Подскажите, есть примеры\гайды, как данные с js кнопок итд, брать реквестами, без сплеша\селениума

Данные с жс? Всмисле?

Можно innerHTML парсить просто, как вариант.

Ну вот есть кнопка
<h3 class="title-item contact-click btn btn-blue btn-lg btns_clock_width wu_paddings_class" onclick="loadContacts()">Контакты</h3>
её жмешь идет POST реквест, и в формдате нужные данные, как их брать, если форма это кнопка

Отправлять пост запрос, который отправляется при нажатии кнопки?

‘h1:text’.get()

С помощью селекторов хочешь сказать?

Да, а как ещё?

Инпуты снизу должны быть по идее