A
Ну вот примерно как здесь написано: http://www.georgestragand.com/elasticsearchbash.html
Дмитрий спасибо! Будем пробовать.
Size: a a a
2016 April 29
DK
Можно было бы еще использовать PostgreSQL и его FTS. Но он так черезжопно сделан и у него такой херовый синтаксис, что я бы не рекомендовал :)
DK
Хотя в одном проекте именно его и используем, ввиду того что в ORM заменили генерацию LIKE оператора на постгресовый FTS оператор. -1 сущность, работает отлично. Синхрониация не нужна. меньше админить. Меньше серверов и точек для отказа.
A
Если серьезно, есть Железка которая генерит очень много логов в тхт. Их надо как-то читать и анализировать. К примеру искать определенные значения или словосочетания. Смотреть, что предшествовало этому логу и что было дальше. Подсчет вести некоторых вхождений. По скорости совсем не критично.
A
Возможно визуализация.
DK
Так тогда ELK стек ставь и все)
DK
Он как раз был создан для таких задач.
SK
Так тогда ELK стек ставь и все)
+ 1
SK
Можно в сторону pg смотреть если потом по этим данным надо будет аналитику гонять развесистую
A
ELK это elasticsearch и kibana?
DI
+ logstash
DK
DK
Как раз чтоб логи как то впихивать во эластик
A
Спасибо! После праздников буду пробовать! Я раньше слышал об эластике, но сегодня только его поставил. Логи нам на флешке приносят, нам значит не нужен logstash?
DK
Думаю что нужен. Так будет проще
A
А по железу?
A
Если ВМ дать 12 vCPU и 32 Gb, потянет?
DK
Я бы начинал с мамого минимума и просто добавлял если не тянет
DN
Если серьезно, есть Железка которая генерит очень много логов в тхт. Их надо как-то читать и анализировать. К примеру искать определенные значения или словосочетания. Смотреть, что предшествовало этому логу и что было дальше. Подсчет вести некоторых вхождений. По скорости совсем не критично.
Кажется у нас в чяте аналитик первого большого российского фаерврола )
A
Кажется у нас в чяте аналитик первого большого российского фаерврола )
Совсем уж глупые вопросы?