Телеграмм чат группы tkhirianov_python

Size: a a a

Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

1497 membersпожаловаться на группу

2019 October 23

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

Рядовой Куча

Я парсер делаю на сайт...у меня в массив links ссылки не передаёт, всю башку себе сломал уже почему

да 100 % есть какаято get функция.

источник

18:50пожаловаться #1

Саня in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

R. T.

да 100 % есть какаято get функция.

Нет, ты ж не запрашиваешь ссылку, ты запрашиваешь значение параметра href.

источник

18:52пожаловаться #2

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

R. T.

да 100 % есть какаято get функция.

Какая конечная задача? Может тебе этих якорей будет достаточно?

источник

18:57пожаловаться #3

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

взять список из 10 новостей с сайта, загнать их базу.

источник

19:07пожаловаться #4

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

ссылки на эти новости.

источник

19:07пожаловаться #5

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

потом циклом взять заголовок и текст, добавить в другие таблицы, и вывести на конечном сайте.

источник

19:08пожаловаться #6

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

и так каждый час по крон, проверяем предыдущие ссылки, если есть новые прогоняем снова и добавляем публикации.

источник

19:09пожаловаться #7

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

Смотри - якоря(#) ведут на одну и ту же страницу

источник

19:09пожаловаться #8

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

да.

источник

19:10пожаловаться #9

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

Тогда не совсем понимаю. Храни урл и якоря отдельно

источник

19:11пожаловаться #10

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

ну так как ты написал и делаю. вдруг исх.сайт путь поменяет. все переписывать

источник

19:12пожаловаться #11

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

Так он может не только урл, а и содержимое поменять. Тогда все равно переделывать придется

источник

19:14пожаловаться #12

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

😁

источник

19:14пожаловаться #13

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

url константа.

источник

19:15пожаловаться #14

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

Ну т.е. твой селектор может и не сработать

источник

19:15пожаловаться #15

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

домен 100%

источник

19:15пожаловаться #16

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

а еще. вопрос, когда реквайст делаешь нужно проверять что сайт отдает 200 или таймаут там

источник

19:17пожаловаться #17

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

я понимаю что нужно.

источник

19:17пожаловаться #18

Evgen in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

R. T.

а еще. вопрос, когда реквайст делаешь нужно проверять что сайт отдает 200 или таймаут там

Ну да - статус код можно проверять

источник

19:18пожаловаться #19

R. T. in Хирьянов Т.Ф., Практика программирования на Python 3 (2019)

спс за помощь.

источник

19:19пожаловаться #20