В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

ClickHouse не тормозит

3886 membersпожаловаться на группу
2019 December 05

DC

Denny Crane (I don't... in ClickHouse не тормозит
Wolf Kreuzerkrieg
Это невероятная херня, ни я (ну у меня опыт с ЗК нулевой) ни девопы не могут понять что ему не так, по логам ничего не понять
зукипер простой как палка, у меня аптайм у нод зукипера по 4 года, это самая надежная вещь на этой планете, после заббикса.
источник
18:23пожаловаться#1

DC

Denny Crane (I don't... in ClickHouse не тормозит
Wolf Kreuzerkrieg
а что там со снепшотами? я предполагаю они довольно жирные будут
размер базы зукипера зависит от прямоты ваших рук. От размера базы КХ почти не зависит.
источник
18:25пожаловаться#2

AP

Alexander Petrov in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
зукипер простой как палка, у меня аптайм у нод зукипера по 4 года, это самая надежная вещь на этой планете, после заббикса.
Протестую! У нас админы заббикс сами ломают, а вот зукипер не смогли ещё завалить хоть и пытались 😀
источник
18:25пожаловаться#3

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
зукипер простой как палка, у меня аптайм у нод зукипера по 4 года, это самая надежная вещь на этой планете, после заббикса.
хм... а какая у тебя версия? древняя какая то, раз аптайм 4 года? может в этом и дело?
источник
18:26пожаловаться#4

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
зукипер простой как палка, у меня аптайм у нод зукипера по 4 года, это самая надежная вещь на этой планете, после заббикса.
насчет прямоты рук, поподробнее плиз, мы то сами ничего с ним не делаем, там КХ что то пишет и пишет, мы тут причем?
источник
18:27пожаловаться#5

DC

Denny Crane (I don't... in ClickHouse не тормозит
Olga Daykhovskaya
>напрямую можно новой функцие input , которая позволяет в insert
INSERT INTO example SELECT id, ifNull(num, -1) FROM input('id UInt32, num Nullable(Int32)') format JSONEachRow {"id": 1, "num": null};

А если столбец типа AggregateFunction?
create table mv_z_store(a date, max_b AggregateFunction(MAX,Int64)) ENGINE = AggregatingMergeTree Partition by toYYYYMM(a) order by a;
INSERT INTO mv_z_store SELECT a, maxState(b) FROM input('a Date, b Int64') group by a format CSV "2019-12-05",1
INSERT INTO mv_z_store SELECT a, maxState(b) FROM input('a Date, b Int64') group by a format Values ('2019-12-05',1);
источник
18:31пожаловаться#6

ДС

Дарья Стрюк... in ClickHouse не тормозит
Всем привет! Кто-нибудь знает, можно ли в clickhouse сделать map для массива? нужно выбрать из массива элементы, которые удовлетворяют некоторым условиям
источник
18:32пожаловаться#7

AP

Alexander Petrov in ClickHouse не тормозит
Дарья Стрюк
Всем привет! Кто-нибудь знает, можно ли в clickhouse сделать map для массива? нужно выбрать из массива элементы, которые удовлетворяют некоторым условиям
Это? https://clickhouse.yandex/docs/ru/query_language/functions/higher_order_functions/
источник
18:33пожаловаться#8

DC

Denny Crane (I don't... in ClickHouse не тормозит
Wolf Kreuzerkrieg
хм... а какая у тебя версия? древняя какая то, раз аптайм 4 года? может в этом и дело?
не в этом. Сколько памяти у сервера? Это выделенный сервер? ЗК и кликхауз нельзя ставить вместе
Ищите OOM в линуксе sudo dmesg | tail
источник
18:33пожаловаться#9

RG

Rodion Gorbachev in ClickHouse не тормозит
Wolf Kreuzerkrieg
насчет прямоты рук, поподробнее плиз, мы то сами ничего с ним не делаем, там КХ что то пишет и пишет, мы тут причем?
Скорее всего про бомбу замедленного действия - читали ? https://clickhouse.yandex/docs/ru/single/#zookeeper
clickhouse.tech
Документация ClickHouse  - Документация ClickHouse
ClickHouse-это быстрая система управления базами данных с открытым исходным кодом, ориентированная на столбцы, которая позволяет создавать аналитические отчеты о данных в режиме реального времени с использованием SQL-запросов
источник
18:34пожаловаться#10

DC

Denny Crane (I don't... in ClickHouse не тормозит
Wolf Kreuzerkrieg
насчет прямоты рук, поподробнее плиз, мы то сами ничего с ним не делаем, там КХ что то пишет и пишет, мы тут причем?
Вы задаете партиционирование и регулируете правильность (по партициям) и частоту инсертов
источник
18:34пожаловаться#11

DC

Denny Crane (I don't... in ClickHouse не тормозит
Rodion Gorbachev
Скорее всего про бомбу замедленного действия - читали ? https://clickhouse.yandex/docs/ru/single/#zookeeper
clickhouse.tech
Документация ClickHouse  - Документация ClickHouse
ClickHouse-это быстрая система управления базами данных с открытым исходным кодом, ориентированная на столбцы, которая позволяет создавать аналитические отчеты о данных в режиме реального времени с использованием SQL-запросов
ну место на диске кончится, при чем падения зукипера?
источник
18:35пожаловаться#12

OD

Olga Daykhovskaya in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
create table mv_z_store(a date, max_b AggregateFunction(MAX,Int64)) ENGINE = AggregatingMergeTree Partition by toYYYYMM(a) order by a;
INSERT INTO mv_z_store SELECT a, maxState(b) FROM input('a Date, b Int64') group by a format CSV "2019-12-05",1
INSERT INTO mv_z_store SELECT a, maxState(b) FROM input('a Date, b Int64') group by a format Values ('2019-12-05',1);
Вариант, попробую
Спасибо
источник
18:35пожаловаться#13

ДС

Дарья Стрюк... in ClickHouse не тормозит
Alexander Petrov
Это? https://clickhouse.yandex/docs/ru/query_language/functions/higher_order_functions/
Да, спасибо!)
источник
18:36пожаловаться#14

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
не в этом. Сколько памяти у сервера? Это выделенный сервер? ЗК и кликхауз нельзя ставить вместе
Ищите OOM в линуксе sudo dmesg | tail
32Г, 16vCPU, выделенные машины, кластер из трех. сколько надо? если надо больше, поставим больше, не вопрос
источник
18:36пожаловаться#15

RG

Rodion Gorbachev in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
ну место на диске кончится, при чем падения зукипера?
Что-то я действительно сегодня - много предполагаю.
источник
18:36пожаловаться#16

DC

Denny Crane (I don't... in ClickHouse не тормозит
Дарья Стрюк
Всем привет! Кто-нибудь знает, можно ли в clickhouse сделать map для массива? нужно выбрать из массива элементы, которые удовлетворяют некоторым условиям
SELECT arrayStringConcat(arrayMap(i -> x[-i], arrayEnumerate(extractAll('Misha', '.') AS x)))
┌─z─────┐
│ ahsiM │
└───────┘
источник
18:37пожаловаться#17

ДС

Дарья Стрюк... in ClickHouse не тормозит
Denny Crane (I don't work at Yandex (never did))
SELECT arrayStringConcat(arrayMap(i -> x[-i], arrayEnumerate(extractAll('Misha', '.') AS x)))
┌─z─────┐
│ ahsiM │
└───────┘
спасибо!))
источник
18:37пожаловаться#18

WK

Wolf Kreuzerkrieg in ClickHouse не тормозит
Rodion Gorbachev
Скорее всего про бомбу замедленного действия - читали ? https://clickhouse.yandex/docs/ru/single/#zookeeper
clickhouse.tech
Документация ClickHouse  - Документация ClickHouse
ClickHouse-это быстрая система управления базами данных с открытым исходным кодом, ориентированная на столбцы, которая позволяет создавать аналитические отчеты о данных в режиме реального времени с использованием SQL-запросов
видели, место было, 78% диска было свободно
источник
18:37пожаловаться#19

DC

Denny Crane (I don't... in ClickHouse не тормозит
Wolf Kreuzerkrieg
32Г, 16vCPU, выделенные машины, кластер из трех. сколько надо? если надо больше, поставим больше, не вопрос
32ГБ достаточно. Единственное что у меня настроено -Xms8g
Смотрите размер снепшота в момент заливки, может у вас вылетает за 32ГБ и надо тогда разбираться почему

еще echo mntr|nc localhost 2181 показывает размер базы в  zk_approximate_data_size
источник
18:42пожаловаться#20