JS
передаются куски партиций, то есть, минимально возможный трафик
спасибо большое )
Size: a a a
2019 December 13
JS
да, я бы сделал так
большое спасибо )
JS
коллеги, а вот получаются реплики разнесенные, нужно 3 зукипера минимум, и их надо в один ДЦ помещать, верно?
F🚜
коллеги, а вот получаются реплики разнесенные, нужно 3 зукипера минимум, и их надо в один ДЦ помещать, верно?
нет, лучше в 3 независимых. ZK - точка отказа
DT
нет, лучше в 3 независимых. ZK - точка отказа
zookeeper же довольно чувствителен к пингу
МШ
а как по опыту, какие машинки лучше использовать под ZK? достаточно ли впски с одним ядром и 4 гигами памяти или надо что то посерьезнее, если предположить, что вставок не так много, в основном все же чтение
F🚜
zookeeper же довольно чувствителен к пингу
и всё же, является точкой отказа всего кластера
JS
нет, лучше в 3 независимых. ZK - точка отказа
а как же требование - 10G между нодами ZK?
F🚜
а как же требование - 10G между нодами ZK?
сомневаюсь, такой throughput ни к чему. А вот латенси - да, он должен быть, по возможности, снижен.
Но Вы должны понять компромис. Либо кластер имеет бОльшую отказоустойчивость за счёт разнесённости, либо при уходе одной из геолокаций Вы согласны терять возможность записи глобально на всём кластере
Но Вы должны понять компромис. Либо кластер имеет бОльшую отказоустойчивость за счёт разнесённости, либо при уходе одной из геолокаций Вы согласны терять возможность записи глобально на всём кластере
JS
сомневаюсь, такой throughput ни к чему. А вот латенси - да, он должен быть, по возможности, снижен.
Но Вы должны понять компромис. Либо кластер имеет бОльшую отказоустойчивость за счёт разнесённости, либо при уходе одной из геолокаций Вы согласны терять возможность записи глобально на всём кластере
Но Вы должны понять компромис. Либо кластер имеет бОльшую отказоустойчивость за счёт разнесённости, либо при уходе одной из геолокаций Вы согласны терять возможность записи глобально на всём кластере
исчерпывающе, спасибо!
N
а как же требование - 10G между нодами ZK?
А где написанно , что нужно 10g?
JS
Nikolay
А где написанно , что нужно 10g?
а тут было, где то среди последних 1.5к записей )) сейчас поищу
KM
а тут было, где то среди последних 1.5к записей )) сейчас поищу
JS
а тут было, где то среди последних 1.5к записей )) сейчас поищу
что-то не нашел, приснилось что ли... 🤔
JS
да, спасибо,
Предпочитайте как минимум 10 Гбит сеть. 1 Гбит также будет работать, но намного хуже для починки реплик с десятками терабайт данных или для обработки распределенных запросов с большим объемом промежуточных данных.
Предпочитайте как минимум 10 Гбит сеть. 1 Гбит также будет работать, но намного хуже для починки реплик с десятками терабайт данных или для обработки распределенных запросов с большим объемом промежуточных данных.
JS
но как бы при сильно удаленных репликах, 10G, это, ээээ... не знаю как это будет )
ДУ
обычно на самом деле. выделенное волокно
JS
ну между континетами это будет космос по бабкам, наверное
V
Eugene Zakharchenko, [13.12.19 08:48]
select count(*) from (select phone, count(*) from table group by phone having count(*) = 1)
select count(*) from (select phone, count(*) from table group by phone having count(*) = 1)
having же выполняется после группировки. можно как -нибудь сделать что-то вроде группировки по дням, но для полей ,которые в таблице единичны? пытаюсь провернуть с toStartOfDay()
ДУ
ну между континетами это будет космос по бабкам, наверное
а, ну так то да, дороговато