В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

MODX. Русскоязычное сообщество.

824 membersпожаловаться на группу
2020 January 28

S

Sergey_K in MODX. Русскоязычное сообщество.
Pavel Zarubin
Только то, что он обходит их эмулируя браузер, а браузер сюрприз-сюрприз парсит именно по такому алгоритму как я описал
Погодь.
Что браузер, что бот тупо шлют GET запрос и все.
Парсят они уже на своей стороне, что делает ваш спор бессмысленным... ну, по логике.
источник
16:09пожаловаться#1

S

Sergey_K in MODX. Русскоязычное сообщество.
Как там парсить для экономии вопрос другой.
источник
16:09пожаловаться#2

S

Sergey_K in MODX. Русскоязычное сообщество.
Обход дерева стандартная матзадача.
источник
16:09пожаловаться#3

Е

Евгений in MODX. Русскоязычное сообщество.
ну зачем ты?
источник
16:09пожаловаться#4

S

Sergey_K in MODX. Русскоязычное сообщество.
Ну мне просто любопытно же
источник
16:09пожаловаться#5

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
Sergey_K
Погодь.
Что браузер, что бот тупо шлют GET запрос и все.
Парсят они уже на своей стороне, что делает ваш спор бессмысленным... ну, по логике.
сначала краулер заходит, потом спайдер
источник
16:10пожаловаться#6

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
краулер проверяет изменилась ли страница
источник
16:11пожаловаться#7

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
спайдер качает ее
источник
16:11пожаловаться#8

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
и кстати ему пох есть nav или нет
источник
16:12пожаловаться#9

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
@orendat  есть что сказать или слился?
источник
16:16пожаловаться#10

S

Sergey_K in MODX. Русскоязычное сообщество.
Я к тому, что не скачав страницу нельзя ничего сказать
источник
16:18пожаловаться#11

S

Sergey_K in MODX. Русскоязычное сообщество.
Соотв она качается всегда
источник
16:18пожаловаться#12

PZ

Pavel Zarubin in MODX. Русскоязычное сообщество.
Evgeniy Gromin
@orendat  есть что сказать или слился?
Еще не слился, провожу тесты, если сольюсь я обязательно напишу, но опять же, я ничего не утверждаю, я лишь предполагаю основываясь на элементарной логике, что подчеркивал в споре не раз
источник
16:18пожаловаться#13

S

Sergey_K in MODX. Русскоязычное сообщество.
А как она парсится вопрос второй
источник
16:18пожаловаться#14

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
Pavel Zarubin
Еще не слился, провожу тесты, если сольюсь я обязательно напишу, но опять же, я ничего не утверждаю, я лишь предполагаю основываясь на элементарной логике, что подчеркивал в споре не раз
их проведено много
источник
16:19пожаловаться#15

PZ

Pavel Zarubin in MODX. Русскоязычное сообщество.
Sergey_K
Я к тому, что не скачав страницу нельзя ничего сказать
Ты хочешь сказать что парсится она уже после? Как вариант кстати, возможно при обходе паук не парсит а просто скачивает, а парсингом занимается уже посредник
источник
16:19пожаловаться#16

PZ

Pavel Zarubin in MODX. Русскоязычное сообщество.
Я об этом к слову не подумал, но сейчас все равно тесты до конца доведу
источник
16:20пожаловаться#17

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
Pavel Zarubin
Ты хочешь сказать что парсится она уже после? Как вариант кстати, возможно при обходе паук не парсит а просто скачивает, а парсингом занимается уже посредник
ты проведи свои тесты и скинь результат
источник
16:20пожаловаться#18

PZ

Pavel Zarubin in MODX. Русскоязычное сообщество.
Evgeniy Gromin
ты проведи свои тесты и скинь результат
да-да, сейчас)
источник
16:20пожаловаться#19

EG

Evgeniy Gromin in MODX. Русскоязычное сообщество.
Pavel Zarubin
да-да, сейчас)
он 0 будет скорее всего
источник
16:21пожаловаться#20