Телеграмм чат группы tarantoolru страница 7215

Size: a a a

Tarantool

2020 September 01

5 шардов, каждый с репликой, итого 10 узлов. все равно 0.05 сек.
надо либо fiber.top смотреть, либо код отрезать кусками.

я кажись воспроизвел:

2020-09-01 20:13:41.177 [93920] main/117/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:07.409 [94734] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.279 [93920] main/117/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.277 [94441] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.276 [94545] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====

5 стораджей, 6 роутеров, последняя версия vshard'a, 500k бакетов

источник

20:17пожаловаться #1

Vladislav Shpilevoy in Tarantool

Vladislav Shpilevoy

ну я бы посмотрел сюда, сторадж тоже может затрагивать, когда бакетов ультра дохрена
https://www.tarantool.io/en/doc/2.5/reference/reference_rock/vshard/vshard_ref/#router-api-discovery-set

www.tarantool.io

Tarantool Data Integration Platform

источник

20:18пожаловаться #2

Vladislav Shpilevoy in Tarantool

Когда бакетов 500к, и роутеров 6 штук, лучше дискавери не оставлять по дефолтам

источник

20:18пожаловаться #3

Vladislav Grubov in Tarantool

Vladislav Shpilevoy

не похоже, я просто убил все файберы дискавери -- и все равно есть ошибки
vshard.router.internal.static_router.discovery_fiber:cancel()

источник

20:19пожаловаться #4

vpol in Tarantool

Vladislav Shpilevoy

Когда бакетов 500к, и роутеров 6 штук, лучше дискавери не оставлять по дефолтам

А есть рекомендации?

источник

20:20пожаловаться #5

Vladislav Shpilevoy in Tarantool

По ссылке написано

источник

20:21пожаловаться #6

vpol in Tarantool

Просто я пересоздавал кластер с 10к, и у меня ничего не поменялось 🤷‍♂️

источник

20:27пожаловаться #7

vpol in Tarantool

Но я попробую, спасибо

источник

20:27пожаловаться #8

Dmitry Sharonov in Tarantool

Vladislav Grubov

я кажись воспроизвел:

2020-09-01 20:13:41.177 [93920] main/117/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:07.409 [94734] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.279 [93920] main/117/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.277 [94441] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====
2020-09-01 20:15:21.276 [94545] main/115/run-sampler I> ==== BLOCKED FOR 0.1s ====

5 стораджей, 6 роутеров, последняя версия vshard'a, 500k бакетов

и впрямь

источник

20:36пожаловаться #9

Dmitry Sharonov in Tarantool

источник

20:36пожаловаться #10

Dmitry Sharonov in Tarantool

Dmitry Sharonov

источник

20:37пожаловаться #11

Dmitry Sharonov in Tarantool

и на 50к бакетов тоже

источник

20:38пожаловаться #12

Vladislav Grubov in Tarantool

Мне почему-то кажется, что это ребалансер ушатывает -- если потушить сторадж с ним, то все живет нормально даже с дискавери (роутер фоллбечится на запросы по 1000 бакетов и тайминги у него отличные: `2020-09-01 20:36:36.261 [13956] main/104/main I> dis: 0.0023`)

если его поднять обратно -- снова появляются BLOCKED

источник

20:38пожаловаться #13

Dmitry Sharonov in Tarantool

но как тогда ето связано с числом роутеров?

источник

20:40пожаловаться #14

Vladislav Grubov in Tarantool

может и никак, я и с одним роутером поймал

источник

20:41пожаловаться #15

Mons Anderson in Tarantool

Вопрос ещё: на каком железе тестите