В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

SEO chat 🏠👨🏻‍💻

5707 membersпожаловаться на группу
2020 May 11

G

Godlike in SEO chat 🏠👨🏻‍💻
Damirka Tatarin
Ребята, доброго дня всем. Подскажите, пожалуйста, почему seo frog показывает 503 ошибку и не дайт сайт спарсить? Сайт живой, работает нормально
Попробуй User-Agent сменить. Если сразу на главную 503 бьет. User Agent - GoogleBot Mobile/Desk
источник
14:35пожаловаться#1

G

Godlike in SEO chat 🏠👨🏻‍💻
Хотя если бы это был ограниченный доступ к краулеру - выбивало 403 или 0 статус. В любом случае нужно пробовать - то что выше подсказали - увеличить интервал запросов к серверу, поменять юзер агента. Если не поможет - проверить доступность сайта для других роботов и думать что не так
источник
14:37пожаловаться#2

4

4eburashkins in SEO chat 🏠👨🏻‍💻
Damirka Tatarin
Ребята, доброго дня всем. Подскажите, пожалуйста, почему seo frog показывает 503 ошибку и не дайт сайт спарсить? Сайт живой, работает нормально
скорее всего заблокированно для парсеров, чтобы серваку больно не делать.
советую попробовать следующее
1. игнорировать robots - http://joxi.ru/Dr8ddnPfo6xWnr
2. сменить юзер агента - http://joxi.ru/ZrJQQqkSwoqzDA
Joxi – an easy-to-use and convenient screenshoter enabling you to exchange screenshots and files on a network
Untitled - Screaming Frog SEO Spider 12.6 (80 kb) uploaded May 11, 2020 Joxi
made using Joxi.net
источник
14:39пожаловаться#3

G

Godlike in SEO chat 🏠👨🏻‍💻
4eburashkins
скорее всего заблокированно для парсеров, чтобы серваку больно не делать.
советую попробовать следующее
1. игнорировать robots - http://joxi.ru/Dr8ddnPfo6xWnr
2. сменить юзер агента - http://joxi.ru/ZrJQQqkSwoqzDA
Joxi – an easy-to-use and convenient screenshoter enabling you to exchange screenshots and files on a network
Untitled - Screaming Frog SEO Spider 12.6 (80 kb) uploaded May 11, 2020 Joxi
made using Joxi.net
Если блокируется доступ в robots - отдается ответ 0 и сообщение "Blocked by robots.txt". Для 503 - доступ не заблокирован, иначе 503 не было бы)
источник
14:43пожаловаться#4

4

4eburashkins in SEO chat 🏠👨🏻‍💻
Godlike
Если блокируется доступ в robots - отдается ответ 0 и сообщение "Blocked by robots.txt". Для 503 - доступ не заблокирован, иначе 503 не было бы)
вот за это спасибо)
но в любом случае лучше роботс отключать, чтобы увидеть весь мусор.
источник
14:47пожаловаться#5

C

Combot in SEO chat 🏠👨🏻‍💻
Leo, искать работу или работников (в том числе исполнителей на разовые работы) в чате запрещено.
Но ты можешь разместить объявление в одном из следующих каналов:
🔸@seohr - вакансии, т.е. постоянная работа
🔸@digitaltender - разовые работы, фриланс
🔸@digitalcv - резюме специалистов
🔸@over100 - работа с зарплатой от 100 000 рублей в месяц и выше
🔸@devshr - вакансии для разработчиков.

#работа
источник
15:36пожаловаться#6

VK

Victor 🏠👨🏻‍💻 Kargeen... in SEO chat 🏠👨🏻‍💻
Дмитрий Каменка
Так вот и хотел поинтересоваться с чего начать почитать что бы просто и понятно из того насколько это возможно написать по данной теме
книжку ашманова купи ) Оптимиазция и продвижение сайтов. ну я думаю найдешь или в истории чата поройся. тут полно уже такой инфы
источник
15:40пожаловаться#7

VS

Victor Stepankov in SEO chat 🏠👨🏻‍💻
!владыка
источник
15:40пожаловаться#8

VS

Victor Stepankov in SEO chat 🏠👨🏻‍💻
видали как умею?
источник
15:41пожаловаться#9

ВM

Виталий Morgenn... in SEO chat 🏠👨🏻‍💻
Victor Stepankov
!владыка
то правоверно
источник
15:41пожаловаться#10

АО

Александр Ожгибесов... in SEO chat 🏠👨🏻‍💻
Коллеги, всем привет. Уже неделю точно наблюдаю такую ошибку. Сайт открыт, любой сервис показывает 200, Google уже забрал в индекс все страницы, Яндекс мозг делает, при этом не даёт запустить РК. Платон отписался - ждите, разбираемся. Может кто знает решение?
источник
15:50пожаловаться#11

VS

Victor Stepankov in SEO chat 🏠👨🏻‍💻
Александр Ожгибесов
Коллеги, всем привет. Уже неделю точно наблюдаю такую ошибку. Сайт открыт, любой сервис показывает 200, Google уже забрал в индекс все страницы, Яндекс мозг делает, при этом не даёт запустить РК. Платон отписался - ждите, разбираемся. Может кто знает решение?
в логах-то что?
Может вообще яндекс на другой сервер стучит, а ты тут голову ломаешь
источник
15:51пожаловаться#12

АО

Александр Ожгибесов... in SEO chat 🏠👨🏻‍💻
источник
15:52пожаловаться#13

АО

Александр Ожгибесов... in SEO chat 🏠👨🏻‍💻
То, что мне отдали в директе.
Хостер не мой, клиента, попросил привлечь их к решению задачи. Но более чем уверен, что яндекс тупит, у них инструменты в явм неделю отваливаются постоянно
источник
15:52пожаловаться#14

VS

Victor Stepankov in SEO chat 🏠👨🏻‍💻
400 это bad request, причин у него вагон и маленькая тележка.
Нужны логи сервера
источник
15:53пожаловаться#15

АО

Александр Ожгибесов... in SEO chat 🏠👨🏻‍💻
Спасибо дорогой!
источник
15:54пожаловаться#16

VS

Victor Stepankov in SEO chat 🏠👨🏻‍💻
может там какой-нить админище со свистящим котелком лимиты на запросы настраивал, например.
Вот юзерагент/IP яндекса в немилость и попали
источник
15:56пожаловаться#17

ВM

Виталий Morgenn... in SEO chat 🏠👨🏻‍💻
ну да, логи апача например глянуть если стоит
источник
16:03пожаловаться#18

ВM

Виталий Morgenn... in SEO chat 🏠👨🏻‍💻
и гнлянуть яндекс вообще хаходит
источник
16:03пожаловаться#19

АЯ

Александр Якимов... in SEO chat 🏠👨🏻‍💻
Ребята, кто может подсказать. Если создать основной сайт и 10 дополнительно и вести все с одного сайта на все десять. Могут посчитать поисковые роботы за сателлиты? У каждого сайта будет разная тематика под свою целевую аудиторию, но это будет под одним брендом. Развиваться будет все по белому.
источник
16:19пожаловаться#20