Телеграмм чат группы scrapy_python страница 841

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

380 membersпожаловаться на группу

2019 September 17

JW

John Wayne in Scrapy

Михаил Синегубов

https://github.com/search?l=Python&q=instagram+scraper&type=Repositories

первая ссыль, в коде есть почти готовая авторизация
но надо понимать, что инста еще те параноики, частенько просят код с почты или смс, можно куки сохранять и подсовывать их скрапи

ок спс, буду читать

источник

22:15пожаловаться #1

2019 September 18

AS

Alexander Serebrov in Scrapy

ок спс, буду читать

https://github.com/instabot-py/instabot.py
Если ещё актуально

instabot-py/instabot.py

Instagram bot. It works without instagram api, need only login and password. Write on python. - instabot-py/instabot.py

источник

11:00пожаловаться #2

EB

Elisei Badanin in Scrapy

Это что?

источник

21:03пожаловаться #3

DD

Danil Denysenko in Scrapy

так препода зовут у меня в универе. Если это ты - тогда нет)

источник

21:11пожаловаться #4

s

serhii in Scrapy

ребята, а можно как-то передать путь локальной директории хтмл файлов, чтобы скрапи их попарсил?
или скрапи только веб сайты парсит?

источник

23:32пожаловаться #5

2019 September 19

i

ildar in Scrapy

Берешь все файлы директории через какой-нибудь glob, и потом в цикле делай из них валидное название file URI, т. е. типа file:///dir/subdir/filename.html
Тогда скрапи их стандартно будет открывать, в духе урлов.

источник

04:46пожаловаться #6

E

Evgen in Scrapy

Можно лёгкий питоновский веб сервер поднять
python3 -m http.server

источник

05:04пожаловаться #7

К

Кирилл in Scrapy

Кто-нибудь прикручивал вывод статистики или оповещения из скрэпи в телеграм? Или запуск паука из бота

источник

15:36пожаловаться #8

A

Кто-нибудь прикручивал вывод статистики или оповещения из скрэпи в телеграм? Или запуск паука из бота

Поддерживаю вопрос, тоже интересно узнать)

источник

15:44пожаловаться #9

E

Evgen in Scrapy

Запуск паука из бота можно сделать при помощи scrapyrt или scrapyd

источник

15:52пожаловаться #10

К

Кирилл in Scrapy

scrapyrt почему-то не релизится, а релиз уже несовместим с текущей версий twisted

источник

16:01пожаловаться #11

К

Кирилл in Scrapy

Наверное придется что-то своё писать для оповещений в телегу

источник

16:03пожаловаться #12

R

Этот extension видел ?

источник

17:22пожаловаться #13

R

https://github.com/zergey/scrapy-tg-export

zergey/scrapy-tg-export

Scrapy extension for Telegram export. Contribute to zergey/scrapy-tg-export development by creating an account on GitHub.

источник

17:22пожаловаться #14

К

Кирилл in Scrapy

оу, нет, не видел, спасибо, как скелет пойдет

источник

17:24пожаловаться #15

R

ну да - там items шлет - но с помощью напильника можно просто оповещения сделать

источник

17:24пожаловаться #16

2019 September 20

s

serhii in Scrapy

https://ru.stackoverflow.com/questions/1026293/%d0%9d%d0%b0%d0%bf%d0%b8%d1%81%d0%b0%d1%82%d1%8c-xpath-%d0%ba%d0%be%d1%82%d0%be%d1%80%d1%8b%d0%b9-%d0%b2%d1%8b%d0%b1%d0%b8%d1%80%d0%b0%d0%b5%d1%82-%d0%b2%d1%81%d0%b5-%d1%8d%d0%bb%d0%b5%d0%bc%d0%b5%d0%bd%d1%82%d1%8b-%d0%be%d1%82-%d0%b8-%d0%b4%d0%be - ребята, помогите с ответом =)

Stack Overflow на русском

Написать XPath, который выбирает все элементы от и до

<!DOCTYPE html>
<html lang="en">

<meta charset="UTF-8">
Title

First H2
Fi...

источник

13:56пожаловаться #17

s

serhii in Scrapy

Я хочу написать XPath выражение, которое вернет список с 3 элементов, в каждый список войдут все элементы, которые начинаются от h2 и заканчиваются перед следующим h2
то есть икспас вернет это

<h2>First H2</h2>
<p>First P</p>
<div>First DIV</div>
<p>Lorem ipsum dolor sit amet, consectetur adipisicing elit.</p>

можно ли это как-то реализовать?

источник

14:29пожаловаться #18

AS

Alexander Serebrov in Scrapy

https://stackoverflow.com/questions/10859703/xpath-select-all-elements-between-two-specific-elements

XPath select all elements between two specific elements

I have a following xml:

<divider />
text
text
text
text
text</p&gt...

источник

14:33пожаловаться #19

s

serhii in Scrapy

Alexander Serebrov

https://stackoverflow.com/questions/10859703/xpath-select-all-elements-between-two-specific-elements

XPath select all elements between two specific elements

I have a following xml:

<divider />
text
text
text
text
text</p&gt...

пока что не понял, как быстр опрописать нужный икспас, но попробую почитать про эту функцию...

источник

14:41пожаловаться #20