В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

E.L.K.

212 membersпожаловаться на группу
2021 January 21

АК

Александр Крыжановск... in E.L.K.
я помню, в жизненном цикле индексов можно настроить удаление индексов старше определенного срока.

но вот как работают остальные действия жизненного цикла я не вникну никак

в жизненном цикле индекса инстурментария для сжатия и архивирования индекса не существует?
источник
12:02пожаловаться#1

АК

Александр Крыжановск... in E.L.K.
вообще прошу подсказать методики для длительного хранения индексов при ограниченном пространстве, если это конечно возможно
источник
12:04пожаловаться#2

D

Dmitriy in E.L.K.
привет. сжатие для индексов выполняется регулярно, сильнее сжать не получится. есть механизм rollup job, но применить его можно не везде - общий смысл - отбрасывание части данных, т.е. удаление отдельных полей, которые не понадобятся через пол года а нужны только в моменте, замена метрик усредненными и т.д. есть еще два варианта, но оба подходят только для хранения, теряешь быстрый доступ - выделение холодных нод с медленными, но дешевыми дисками, или снятие снапшотов с последующим их бекапом.
источник
12:10пожаловаться#3

АК

Александр Крыжановск... in E.L.K.
если у меня нет запаса дисков и в среднем хранится 7 индексов по 100 гигов в день - сильнее сжать чем 100 гигов у меня не выйдет, в тмо числе и снапшот будет весить столько же?
источник
12:13пожаловаться#4

D

Dmitriy in E.L.K.
да
источник
12:20пожаловаться#5

АК

Александр Крыжановск... in E.L.K.
спасибо
источник
12:20пожаловаться#6

АК

Александр Крыжановск... in E.L.K.
а если в логстеше просто удалять поля перед вставкой документа - надо поменять маппинг, чтобы не было конфликта?
источник
12:34пожаловаться#7

DM

Dmitry Malinin in E.L.K.
Можно с помощью  http://vector.dev  он замечательно умеет
vector.dev
Vector - A lightweight and ultra-fast tool for building observability pipelines | Vector
источник
12:35пожаловаться#8

D

Dmitriy in E.L.K.
конфликта от отсутствующих полей не будет. конфликт будет, если ты в существующее в маппинге поле будешь писать другой тип данных
источник
12:35пожаловаться#9
2021 January 22

MA

M A in E.L.K.
Amazon и Logz объявили о создании форков Elasticsearch https://opennet.ru/54456/
www.opennet.ru
Amazon и Logz объявили о создании форков Elasticsearch
Компания Amazon сообщила о создании собственного форка платформы поиска, анализа и хранения данных Elasticsearch, а также связанного с платформой web-интерфейса Kibana. Решение принято после перевода исходного проекта на несвободную лицензию SSPL и прекращения публикации изменений под старой лицензией Apache 2.0. Несколько дней назад организация OSI (Open Source Initiative), занимающейся проверкой соответствия лицензий критериям Open Source, подтвердила, что лицензия OSI не является открытой и продукты на её основе следует считать проприетарными.
источник
20:01пожаловаться#10
2021 January 27

IT

Igor Teresco in E.L.K.
Всем всего!
источник
15:31пожаловаться#11

IT

Igor Teresco in E.L.K.
Может тривиальный вопрос по ELK, просветите, пожалуйста:
Есть логи приложения, хранящиеся в XML формате, одно строкой, без LF/CR.
Как такое затащить в ELK, если FileBeat не понимает, когда лог файл обновился?
источник
15:34пожаловаться#12

DM

Dmitry Malinin in E.L.K.
fluentd а лучше vector.dev
источник
15:34пожаловаться#13

IT

Igor Teresco in E.L.K.
да, чуть не забыл - на серверах винда
источник
15:35пожаловаться#14

DM

Dmitry Malinin in E.L.K.
ответ тот же :)
источник
15:35пожаловаться#15

DM

Dmitry Malinin in E.L.K.
Эластику в принципе пофигу кто поднес ему логи. Вектор и влюэнт умеют могучее мидлваре, в отором вы можете и  CR/LF фиксить. и конвертировать на лету во что угодно..
источник
15:36пожаловаться#16

DM

Dmitry Malinin in E.L.K.
Стоит просто почитать про них.
источник
15:36пожаловаться#17

IT

Igor Teresco in E.L.K.
про fluentd читал, сейчас про vector гляну - Спасибо!
источник
15:37пожаловаться#18

DM

Dmitry Malinin in E.L.K.
Вектор прям очень к сердцу пришелся. И стилем конфигов и количеством плагинов. Да и по скорости он побыстрее разика в полтора два будет
источник
15:38пожаловаться#19

DM

Dmitry Malinin in E.L.K.
И что замечательно - очень активно развивается.

Там кстати есть пасхалка в описании в разделе оптимизация и тюнинг.
источник
15:38пожаловаться#20