В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

E.L.K.

141 membersпожаловаться на группу
2019 December 16

D

Dmitriy in E.L.K.
Dmitry
в противном случае у нас рискует быть пайплайн на 500 строк, у нас он уже на 170) кошмар инженера ELK
ну не знаю... у меня сейчас есть пайплайн на 250+ строк, в один воркер. проблем с производительностью не заметно, но там поток не большой, ~1к/с
источник
14:53пожаловаться#1

D

Dmitry in E.L.K.
я больше беспокоюсь о том как всё обслуживать это и дописывать дополнительную фильтрацию если надо распарсить логи отдельного продукта (типа nginx)
источник
14:54пожаловаться#2

D

Dmitriy in E.L.K.
аккуратно выделяя в блоки и обвешивая тегами) тогда все легко читается-ищется
источник
14:55пожаловаться#3

D

Dmitry in E.L.K.
так и живем
источник
14:56пожаловаться#4

D

Dmitry in E.L.K.
Николай
на Ingest ноде
а это будет работать на бесплатной лицензии? потому что на индексах у меня стоит default_pipeline: none, хотя все логи обрабатываются
источник
15:28пожаловаться#5

D

Dmitriy in E.L.K.
Dmitry
а это будет работать на бесплатной лицензии? потому что на индексах у меня стоит default_pipeline: none, хотя все логи обрабатываются
будет. пайплайны на эластике - это урезанный функционал, призванный заменить логстеш в простых случаях - парсинг, несложные преобразования/обогащения, и т.д.
источник
15:31пожаловаться#6

D

Dmitry in E.L.K.
спасибо
источник
15:31пожаловаться#7

D

Dmitry in E.L.K.
Николай
сам не пробовал. но по докам, в аутпуте еластиксерч. указываешь пайплайн который нужен
тогда это мне не подойдет
источник
15:32пожаловаться#8

АБ

Алексей Быстрый in E.L.K.
Привет. Пишем в эластик. Очень много.
Запись в эластик около 1.5с
Нагрузка на CPU 25%.
Как его, блин, затюнить чтобы быстрее было?
источник
16:12пожаловаться#9

MP

Mike Pulman in E.L.K.
Алексей Быстрый
Привет. Пишем в эластик. Очень много.
Запись в эластик около 1.5с
Нагрузка на CPU 25%.
Как его, блин, затюнить чтобы быстрее было?
просьба детализировать что имеешь ввиду под "Запись в эластик около 1.5с" и  "Пишем в эластик. Очень много"
источник
16:16пожаловаться#10

АБ

Алексей Быстрый in E.L.K.
Mike Pulman
просьба детализировать что имеешь ввиду под "Запись в эластик около 1.5с" и  "Пишем в эластик. Очень много"
Аппликейшн получает респонс о успешной записи через 1.5с
источник
16:17пожаловаться#11

MP

Mike Pulman in E.L.K.
Алексей Быстрый
Аппликейшн получает респонс о успешной записи через 1.5с
То есть ваша самодельная апликуха сама шлет данные в эластик ?
источник
16:20пожаловаться#12

АБ

Алексей Быстрый in E.L.K.
Mike Pulman
То есть ваша самодельная апликуха сама шлет данные в эластик ?
да
источник
16:20пожаловаться#13

MP

Mike Pulman in E.L.K.
Можно строку лога из которой видно что 1.5с респонс ну и чтобы атм было видно что за запрос в эластик отправляется
источник
16:20пожаловаться#14

АБ

Алексей Быстрый in E.L.K.
Mike Pulman
Можно строку лога из которой видно что 1.5с респонс ну и чтобы атм было видно что за запрос в эластик отправляется
это я смотрю по метрикам из аппликейшена. Но я им доверяю. Остальные метрики тоже коррелируют.
источник
16:22пожаловаться#15

АБ

Алексей Быстрый in E.L.K.
Там в эластик уходит 1мб данных около
источник
16:22пожаловаться#16

D

Dmitriy in E.L.K.
Алексей Быстрый
Там в эластик уходит 1мб данных около
это одна строка? тогда нормально
источник
16:23пожаловаться#17

АБ

Алексей Быстрый in E.L.K.
Dmitriy
это одна строка? тогда нормально
ну мы балком пишем. По 10.
Балк выходит 10мб
источник
16:24пожаловаться#18

D

Dmitriy in E.L.K.
тогда респонс в 1.5с - вполне адекватен. повышать - толтко за счет многопоточной отправки
источник
16:26пожаловаться#19

АБ

Алексей Быстрый in E.L.K.
Dmitriy
тогда респонс в 1.5с - вполне адекватен. повышать - толтко за счет многопоточной отправки
Многопоточности самого приложения?
источник
16:27пожаловаться#20