поставь логстеш и пиши в два кластера одновременно

вот только не забудьте, что в логстеш используется механизм "At-Least-Once", и если один output в pipeline будет недоступен, то не будет записи и в рабочий кластер

зависит, конечно, от схемы

но можно сделать 2 пайплайна

каждый будет писать в свой кластер

да, два пайплайна

Коллеги, всем доброго времени суток. Есть 200к записей в индексе Эластика, нужно добавить поле property_id (по дефолту будет null).

Накатываю миграцию:
1. Добавил мапинг поля для документам, проапдейтил 200к записей через update_by_query (можно скролл).

Вопрос, как откатить миграцию? Нашел скрип на удаление поля из документа ctx._source.remove('property_id').  Проблема, поле property_id остается в мапинге индекса,  как дропнуть? Спасибо.

подскажите как в логстеше можно заменять рандомное количество последовательных пробелов или запятых на один.
131221,1516,00155,,,,,,,,,,,,1075,,,,,,,,,,,,,,,,,,,,1599

https://www.elastic.co/guide/en/logstash/current/plugins-filters-mutate.html#plugins-filters-mutate-replace
регулярка  навскидку выглядит ([ ,])+
https://regex101.com/r/GDZU4B/1
но не уверен что её можно засунуть в gsub
но можно сделать два gsub-а, один обрабатывает пробелы другой запятые. ",+"  и "\ +"   соотвественно

спасибо, тоже наткнулся на эту страницу

1. Удаление полей в индексе отсутствует вообще в принципе. Некоторый смысл в том чтобы такое существовало есть, но в свете того, что весь мир живёт либо на короткоживущих, либо на постоянно пересоздаваемых индексах, это большой проблемой как правило не является

2. Если сейчас в документах такого свойства не существует, то и update by query делать смысла не было

Kimberly Hamilton: user has been CAS banned

Joseph Wood: user has been CAS banned

Подскажите у меня в elastc kibana
Управление индексами indeces managmant появляются каждый день новый но тот же самый индекс с именем дня
А где это настраивается

В каком файле эта настройка есть

Caitlin Watson: user has been CAS banned

Michael Day: user has been CAS banned

А кто данные в эластик льет?

Парни

как будет на английском "глаз замылился"?

не дословно а что бы носило тот же смысл