Size: a a a

Чат BackOrder.ru

2021 September 05

d

dotNames in Чат BackOrder.ru
Как можно закрыть парсеры ссылок?
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Не правильно выразился, от ботов ахрефса/серпстата
источник

d

dotNames in Чат BackOrder.ru
Они слушаются robots.txt? Или по IP?
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Слушались, последнее время я обленился и не проверял
источник

d

dotNames in Чат BackOrder.ru
Имхо, сомневаюсь 😊 имхо, их вид деятельности не позволяет слушаться. Иначе их БД не будет пополняться.
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Роботсе и хтаксессе известных ботов закрывали
источник

d

dotNames in Чат BackOrder.ru
Ip они постоянно новые добавляют. Как понимаю с дешёвых вдс-ок.
источник

D

Dima in Чат BackOrder.ru
Я по ip всех закрываю, хорошо работает
источник

D

Dima in Чат BackOrder.ru
За исключением парсинга с мобильных проксей
источник

D

Dima in Чат BackOrder.ru
Но и этих ловлю
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Как часто новые ip появляются?
источник

d

dotNames in Чат BackOrder.ru
Не знаю, но как не посмотрю с каких то левых сеток лезут. Можно конечно тратить кучу времени на отлов.
источник

D

Dima in Чат BackOrder.ru
Я подсетями блокирую. Подсети редко новые
источник

d

dotNames in Чат BackOrder.ru
Я тут не понял. Имеется ввиду какой домен-донор? Новостник или уже сайтец прослойку?
источник

NM

Novikov Mikhail in Чат BackOrder.ru
Это публичные компании, дорожат своей репутацией. У них там ipo, акции. На западе обходить правила стоит дорого. Где-то был отчет, что в ахрефре много миллионов сайтов не хватает по этой причине
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Домен который ты забрал и на который ссылается новостник, я не использовал проклы.

Это как сайты от ркн переклеивали или дропы на казино отправляющие, на сайт можно попасть только с поиска, а тут и с поиска закрываешь. И получается, что кроме поисковиков никто туда не попадает
источник

d

dotNames in Чат BackOrder.ru
А этот не будет расценно поисковиками, как клоакинг?
источник

NM

Novikov Mikhail in Чат BackOrder.ru
Скорее всего будет
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Так поисковик же знает что там 301
источник

VO

Vladimir Osadchiy in Чат BackOrder.ru
Там нет контента
источник