Size: a a a

Мониторинг

2020 December 15

DS

Damir Safix in Мониторинг
готов сам погрузиться в это, но не понятно что именно курить так сказать.
источник

BT

Boris Talovikov in Мониторинг
Можешь парсить выдачу гугла за час с помощью скриптов и слать результат через zabbix_sender
источник

NS

N S in Мониторинг
Damir Safix
мне нужно мониторить и скрейпить посты из соцмедиа, статьи блогов, сайтов типа medium. критерий - упоминание определённого слова. с чего начать изучение и получение первых результатов? нужно юзать сторонние API?
Так в гугле же можно установить триггер на определённое слово
источник

DT

Dmitry Tigrov in Мониторинг
Damir Safix
мне нужно мониторить и скрейпить посты из соцмедиа, статьи блогов, сайтов типа medium. критерий - упоминание определённого слова. с чего начать изучение и получение первых результатов? нужно юзать сторонние API?
есть готовые системы типо Avalanche, можно найти старую версию(которая не онлайн) и с ней работать
источник
2020 December 16

AE

Ant0n Erem1n in Мониторинг
Damir Safix
подскажите решение
python3 + Requests + BeautifulSoup
python3 + Requests + Scrapy
здесь сравнение библиотек: https://pythonru.com/biblioteki/sozdanie-parserov-s-pomoshhju-scrapy-i-python

javascript + Puppeteer
javascript + selenium
подробнее здесь: https://proglib.io/p/puppeteer-parsing-saytov-na-javascript-2020-06-16

go + Colly
подробнее здесь: https://medium.com/@ternary_cat/парсинг-сайтов-с-go-af42b5f6ac76

freelance
https://freelance.ru/alephone1/parser-socialnoj-seti-medium-com-3432817.html
источник

DS

Damir Safix in Мониторинг
спасибо за ответы! сейчас буду изучать
источник

A

Anka in Мониторинг
Damir Safix
мне нужно мониторить и скрейпить посты из соцмедиа, статьи блогов, сайтов типа medium. критерий - упоминание определённого слова. с чего начать изучение и получение первых результатов? нужно юзать сторонние API?
Brand analytics, youscan и им подобные. Они тебе еще и аналитику вывалят по найденному
источник

DS

Damir Safix in Мониторинг
Anka
Brand analytics, youscan и им подобные. Они тебе еще и аналитику вывалят по найденному
знаком
источник

DS

Damir Safix in Мониторинг
мне чел, аффилированный с ba сказал что сбор данных может стоить от 10 млн., а youscan меня послали, не особо хочется к ним обращаться)
источник

DS

Damir Safix in Мониторинг
тем более интересен не только ру мониторинг
источник

A

Anka in Мониторинг
ba от 2800 в месяц, а вообще их тонна подобных в том числе западных
источник

E

Evgеnу in Мониторинг
Damir Safix
мне чел, аффилированный с ba сказал что сбор данных может стоить от 10 млн., а youscan меня послали, не особо хочется к ним обращаться)
Ну, так-то 10 млн. за такой функционал это ещё по-божески.

Или вы думаете что сможете на коленке сделать свое решение без опыта?

А все что готовое имеет цену, которую определяет рынок
источник

A

Anka in Мониторинг
Ну 10 млн это искать все упоминания путина за 5 лет условно)
источник

IA

Ilya Ableev in Мониторинг
Это здесь действительно нужно?🙂
источник

AE

Ant0n Erem1n in Мониторинг
а сбербанк так придет в чат?)
источник

DS

Damir Safix in Мониторинг
Anka
ba от 2800 в месяц, а вообще их тонна подобных в том числе западных
спасибо, но я не настолько новичок, чтобы не знать о том, что вы говорите
источник

DS

Damir Safix in Мониторинг
Ilya Ableev
Это здесь действительно нужно?🙂
ну а в лс мне это точно не нужно
источник

A

Anka in Мониторинг
Damir Safix
спасибо, но я не настолько новичок, чтобы не знать о том, что вы говорите
тогда в чем вопрос? хотите не платить и написать сами скрипт делающий тоже самое что и специализированные системы?
источник

IA

Ilya Ableev in Мониторинг
Бред какой-то
источник

A

Anka in Мониторинг
с тем же успехом можно спросить как мониторить инфраструтуру, но заббикс сложно, а датадог дорого
источник