Телеграмм чат группы clickhouse

Size: a a a

ClickHouse не тормозит

2021 July 04

ну есть SYSTEM STOP MERGES

посмотрите в query_log почему мержи перестали идти
и в /var/log/clickhouse-server/clickhouse-server.*
Загляните

источник

07:30пожаловаться #1

Slach in ClickHouse не тормозит

а со стотороны kafka ничего не поменялось?
выглядит так что у вас дофига записей пришло и их мержить надо толпу

источник

07:46пожаловаться #2

АЛ

Анатолий Лотинфо... in ClickHouse не тормозит

всем привет, а есть возможность в select исключать переменные, как в монге ? а то у меня 700 полей и надо только несколько исключить чтобы перелить данные из одной таблицы в другую

источник

08:38пожаловаться #3

Slach in ClickHouse не тормозит

https://clickhouse.tech/docs/en/sql-reference/statements/select/#except-modifier

clickhouse.tech

SELECT Query

SELECT Query SELECT queries perform data retrieval. By default, the requested data is returned to the client, while in c

источник

08:43пожаловаться #4

АЛ

Анатолий Лотинфо... in ClickHouse не тормозит

ООоОО вроде все инструкции уже на несколько раз перечитал но на это не натыкался

источник

08:43пожаловаться #5

АЛ

Анатолий Лотинфо... in ClickHouse не тормозит

спасибо

источник

08:43пожаловаться #6

Slach in ClickHouse не тормозит

только версию clickhouse проверьте, по моему это после 21.3 появилось только

источник

08:49пожаловаться #7

АЛ

Анатолий Лотинфо... in ClickHouse не тормозит

ок, спасибо

источник

08:49пожаловаться #8

rpuropuu Greeg'O'Rii... in ClickHouse не тормозит

Мне поставлена задача освоить стак: Кассандра, Спарк, Кафка. Для аналитики в Табло. Слышал что кликхаус ощущает кафку как часть себя. Есть тут кто, кто использует кликхаус как витрину? И вообще нужны ли мне знания кафки и спарка? Вдруг можно обойтись одним кликхаусом как-нибудь.

источник

09:12пожаловаться #9

Slach in ClickHouse не тормозит

=) нет, кликхаус ощущает кафку как ням-ням-ням очень фкусненько, дайте мне еще ваших данных =)

если вам поставили задачу, то наверное не просто так, а потому что эти технологии в компании уже используются
так что стоит на них и сосредоточится

а потом и понимание придет, где конкретно вам clickhouse нужен или не нужен вообще

источник

09:34пожаловаться #10

rpuropuu Greeg'O'Rii... in ClickHouse не тормозит

Контора буржуйская. И там никто даже не думал в сторону кликхауса. Поскольку меня расширяют в дата инженеры, я подумал вдруг инициативу проявлю полезную)

источник

09:36пожаловаться #11

rpuropuu Greeg'O'Rii... in ClickHouse не тормозит

Поправил слово.

источник

09:37пожаловаться #12

rpuropuu Greeg'O'Rii... in ClickHouse не тормозит

И с того что по кликхаусу смотрел, пока не ясна его роль.

источник

09:39пожаловаться #13

Slach in ClickHouse не тормозит

Ну если грубо
То это высоко эффективное final write once хранилище структурированных данных с возмодностью быстрого аггрегирования
В связке с табло
Недавно стало лучше коннектор поверх odbc появился

источник

10:05пожаловаться #14

rpuropuu Greeg'O'Rii... in ClickHouse не тормозит

Да я и написал сюда. В Табло хвалят кликхаус.

источник

10:08пожаловаться #15

Alexander Ryzhenko in ClickHouse не тормозит

Всем привет. Подскажите, если делать select from jdbc('jdbc:sqlserver:…..)
можно ли как-то добавить условие, которое выполнится ТАМ?
Или токльо тянусть все к себе, и уже тут делать сортировку?

источник

11:50пожаловаться #16

Slach in ClickHouse не тормозит

для WHERE делается push down внутрь источника
сортировка и группировка на стороне clickhouse

источник

11:53пожаловаться #17

Alexander Ryzhenko in ClickHouse не тормозит

То есть невозможно выбрать лишь часть на стороне mssql?

У меня там таблица на 60М записей, а нужно всего около 1000 последних

источник

11:57пожаловаться #18

Slach in ClickHouse не тормозит

SELECT * FROM jdbc() WHERE date>=toDate(now()) ORDER BY date LIMIT 1000

WHERE выберет те данные которые за текущий день на стороне JDBC источника... а ORDER BY и LIMIT сделает на стороне clickhouse

источник

12:05пожаловаться #19

Slach in ClickHouse не тормозит

попробуйте

SELECT
    toDate(time) AS dt,
    count(*) AS total
    countIf(event = 'CREATE_CHAT') AS create_chat
    create_chat / total AS percent
FROM tutorial.community_actions
WHERE  (dateDiff('day', community_registered_time, time) <= 7) AND (dateDiff('day', time, now()) <= 60)
GROUP BY dt

источник

12:22пожаловаться #20