Z
Size: a a a
2020 August 05
FZ
Подскажите по сео ворпреса. Установил плагин и там написано что дескрипшн берется автоматом из первого абзаца. Это нормально или нужно другой плагин искать, чтобы на каждой странице вручную прописывать
лучше другой
DP
Подскажите по сео ворпреса. Установил плагин и там написано что дескрипшн берется автоматом из первого абзаца. Это нормально или нужно другой плагин искать, чтобы на каждой странице вручную прописывать
не критично, потому как ПС сами формируют этот тег в большинстве случаев
П
ни у кого случайно нет многопоточного парсера Н1?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
AU
ни у кого случайно нет многопоточного парсера Н1?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
нетпик сео спайдер) 100 потоков)
C
нетпик сео спайдер) 100 потоков)
AU
правда одна проблема - все в памяти хранит, в отличии от лягушки, которая умеет на диск писать
П
нетпик сео спайдер) 100 потоков)
он неделю будет парсить. и лягушку и нетпик и еще софтин 10 пробовал, долго.
C
он неделю будет парсить. и лягушку и нетпик и еще софтин 10 пробовал, долго.
П
правда одна проблема - все в памяти хранит, в отличии от лягушки, которая умеет на диск писать
мне б что б на несколько проксей с мин таймаутом повесить и только 1 тег забирал скрипт
AU
скрипт полюбому должен весь html получить.
П
скрипт полюбому должен весь html получить.
не обязательно. он может заканчивать цикл на /Н1.
придется писать
придется писать
KB
ни у кого случайно нет многопоточного парсера Н1?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
Нужно собрать с 14,3млн страниц, только Н1. А писать ради одной задачи не хочется. Может есть у кого готовый?
В Netpeak Checker можно задать 200 потоков для сбора H1, если каждая страница будет отвечать в районе 1 секунды, тогда на это уйдёт меньше дня.
C
В Netpeak Checker можно задать 200 потоков для сбора H1, если каждая страница будет отвечать в районе 1 секунды, тогда на это уйдёт меньше дня.
@kosta_bankovski поообщайся с Kosta Bankovski про Netpeak, плз.
#netpeak
#netpeak
AU
урлы есть страниц?
П
В Netpeak Checker можно задать 200 потоков для сбора H1, если каждая страница будет отвечать в районе 1 секунды, тогда на это уйдёт меньше дня.
да? ну еще раз поставлю проверить, у меня за 10 часов даже 5% не собралось. Но это из за таймаутов
KB
да? ну еще раз поставлю проверить, у меня за 10 часов даже 5% не собралось. Но это из за таймаутов
Перепроверьте, я говорю именно про Netpeak Checker, не Spider
C
Перепроверьте, я говорю именно про Netpeak Checker, не Spider
Н
а можно ли как-то посмотреть массово на какие страницы какой трафик идет и сколько его?
П
Перепроверьте, я говорю именно про Netpeak Checker, не Spider
ок, спс. попробую. А 16гб оперативы хватит на 14млн как думаете?или лучше побить?