Телеграмм чат группы clickhouse

01:05пожаловаться #1

Ovseiko

Коллизии как?

коллизии в биг-дата обычно не принимаются во внимание, ну ошибка на 0.00001%, пофиг.
Вот например гугл-дремель -- биг-дата олап, ждет ответа n-миллисекунд, если какой-то шард из 20тыс. не ответил, будет ошибка 0.001% , да и пофиг.

Ovseiko in ClickHouse не тормозит

01:45пожаловаться #2

Хорошо, тогда ещё вопрос, а как поведет себя бд при коллизии? Не будет записана строка или поддерживается повторение primary key?

02:25пожаловаться #3

Ovseiko

в зависимости от движка таблицы,
в некоторых у тебя просто будет две таких записи
в некоторых они по определенным правилами превратятся в одну

Ovseiko in ClickHouse не тормозит

03:18пожаловаться #4

Движок mergetree

03:19пожаловаться #5

но для всех движков кликхаус тебе не помешает вставить несколько записей с одинаковым pk

03:20пожаловаться #6

Ovseiko

Движок mergetree

будет несколько записей

03:20пожаловаться #7

грубо говоря кликхаус вообще не проверяет есть ли такой ключ или нет при вставке

03:20пожаловаться #8

подскажите, пожалуйста, ресурсы, которые помогут зашарить устройство блокировок в clickhouse

03:24пожаловаться #9

интересует что такое рецепты блокировок и как они работают

03:26пожаловаться #10

Vladimir Goncharov

подскажите, пожалуйста, ресурсы, которые помогут зашарить устройство блокировок в clickhouse

в КХ нет транзакций и блокировок.

Есть изоляция в том смылсе что селект не видит данные которые были вставлены после его старта.

03:39пожаловаться #11

полный вопрос: В модели данных и API ZooKeeper нет блокировок, они реализуются с помощью рецепта. В чем отличие рецептов блокировки, которые используются системами Kafka и в ClickHouse?

03:41пожаловаться #12

Vladimir Goncharov

каких блокировок? В КХ нет блокировок, они не нужны. Все данные иммьютебл, есть только insert. Какие блокировки?

03:43пожаловаться #13

Есть блокировки для alter / drop но это как бы админстративные операции, их нет смысла рассматривать.

03:44пожаловаться #14

Кафка вообще каким образом к КХ?

03:45пожаловаться #15

Т.е. можно пытаться эмулировать блокировки в КХ типа вставляем в таблицу X запись 0, но проблема в eventual consistency что реплика получит эту запись в неопрделенном будущем. Поэтому намного проще делать блокировки во внешней системе в зукипере в mysql , просто файл на диске.

papa karlo in ClickHouse не тормозит

03:49пожаловаться #16

видимо речь про всякие такие штуки
https://zookeeper.apache.org/doc/current/recipes.html
https://curator.apache.org/curator-recipes/index.html
и про их отношение к тому как zk используется в ch и кафке.

03:49пожаловаться #17

Аа в смысле про то разработку КХ, ясно.

03:50пожаловаться #18

papa karlo

да, про них. спасибо:)

nikita in ClickHouse не тормозит

03:59пожаловаться #19

Всем привет, почему в лог может спамиться ошибка:
2019.12.16 11:13:53.784191 [ 89 ] {} <Error> ServerErrorHandler: Poco::Exception. Code: 1000, e.code() = 0, e.displayText() = SSL Exception: error:14037416:SSL routines:ACCEPT_SR_KEY_EXCH:sslv3 alert certificate unknown (version 19.17.5.18 (official build)