Size: a a a

2019 October 01

АК

Александр Крыжановский in E.L.K.
ща соберу статистику и расскажу, минут через 30 отвечу
источник

АК

Александр Крыжановский in E.L.K.
в данный момент 76 индексов
10 по 50-60 гб, до 55 миллионов документов, шард на индексе 2
10 по 50-70 гб, до 250 миллионов документов, шард на индексе 2
56 по 3-5 гб, до 15 миллионов документов, шард на индексе 2

в моем "кластере" из одного хоста примерно 4 миллиарда документов, 152 шарда

рейт индексации таким образом выходит 315000000/86400= 3700 доков в секунду

поисковя нагрузка
каждые 10 минут 20 запросов с ренжем за эти 10 минут

ребут кибаны помогает на некоторое время
источник

АК

Александр Крыжановский in E.L.K.
общий вес индексов чуть больше терабайта
источник

АК

Александр Крыжановский in E.L.K.
10 по 50-70 гб, до 250 миллионов документов, шард на индексе 2

это нетфлоу
источник

MP

Mike Pulman in E.L.K.
Размеры ты указал с учетом реплик? шарды ты написал только праймари или праймари + реплика?
источник

АК

Александр Крыжановский in E.L.K.
ну, я делаю GET <indice>/_stats
и получаю такое:
{
 "_shards" : {
   "total" : 2,
   "successful" : 1,
   "failed" : 0
источник

АК

Александр Крыжановский in E.L.K.
напомню, ща один хост. реплики в таком случае вообще существуют?
источник

MP

Mike Pulman in E.L.K.
Александр Крыжановский
напомню, ща один хост. реплики в таком случае вообще существуют?
А, точно, запамятовал
источник

MP

Mike Pulman in E.L.K.
Александр Крыжановский
ну, я делаю GET <indice>/_stats
и получаю такое:
{
 "_shards" : {
   "total" : 2,
   "successful" : 1,
   "failed" : 0
ну всего у тебя должно быть вда шарда, а удачный только один. т.е. реплики я так понимаю у тебя включены, но им некуда распределяться
источник

MP

Mike Pulman in E.L.K.
А в чем выражается "не справляется" ?
источник

АК

Александр Крыжановский in E.L.K.
ну, кибана часто 500 возвращать начала
источник

АК

Александр Крыжановский in E.L.K.
ребут кибаны помогает на некоторое время
источник

АК

Александр Крыжановский in E.L.K.
регулярно ребутать?
источник

АК

Александр Крыжановский in E.L.K.
или добавить ей памяти?
источник

MP

Mike Pulman in E.L.K.
Александр Крыжановский
регулярно ребутать?
точно нет!
источник

MP

Mike Pulman in E.L.K.
Александр Крыжановский
или добавить ей памяти?
точно нет!
источник

MP

Mike Pulman in E.L.K.
Александр Крыжановский
ну, кибана часто 500 возвращать начала
Под суперюзером?
источник

АК

Александр Крыжановский in E.L.K.
Mike Pulman
Под суперюзером?
запущена как сервис
источник

АК

Александр Крыжановский in E.L.K.
установлена из пакетов, то ест ьпод собственным юзером запщена
источник

MP

Mike Pulman in E.L.K.
имею ввиду ты в кибане под каким юзером сидишь?
источник