c
Кусками u mean делить по периодам, я не помню шоп в клике такое было, но посмотрю, спс
Size: a a a
2021 July 09
PK
use WHERE Luke
c
Йеп, i got it
c
Протупел
M
Здравствуйте,
Помогите со скриптом лефтджойна:
Левая:
Таймстемп
Правая:
Таймстемп
Текстовое поле
Джойн по Таймстемп
Обе Таблицы 10м.
Джойн не хватило памяти.
Пытаюсь через унион ол и групбай.
Я планирую в первой таблице добить столбец NULL и потом сгруппировать по ts.
Вопрос в том: какую агрегирующую функцию взять, чтобы сделать
select ts, ???AGG???(text)
from (table1 union all table2)
group by ts
Помогите пожалуйста
Помогите со скриптом лефтджойна:
Левая:
Таймстемп
Правая:
Таймстемп
Текстовое поле
Джойн по Таймстемп
Обе Таблицы 10м.
Джойн не хватило памяти.
Пытаюсь через унион ол и групбай.
Я планирую в первой таблице добить столбец NULL и потом сгруппировать по ts.
Вопрос в том: какую агрегирующую функцию взять, чтобы сделать
select ts, ???AGG???(text)
from (table1 union all table2)
group by ts
Помогите пожалуйста
K
а в чем проблема? почему памяти не хватило? попробуйте сбрасывать на диск, если мало памяти.
SELECT now() + interval number second, NULL from system.numbers limit 10
UNION ALL
SELECT now() + interval number second, number from system.numbers limit 10;
SELECT now() + interval number second, NULL from system.numbers limit 10
UNION ALL
SELECT now() + interval number second, number from system.numbers limit 10;
VG
при джойне правая сторона должна умещаться в оперативе. попробуйте добавить оперативы. к тому же 10м - это вообще ни о чём. у вас только 8 гб оперативы что ли?
VG
может вы джойните по таймстемпу неправильно и у вас кроссжойн получается? попробуйте добавить в where какое-нибудь условие и посмотреть сколько строк будет.
скиньте ddl таблиц, без этого пока не совсем понятно.
скиньте ddl таблиц, без этого пока не совсем понятно.
G
ClickHouse/ClickHouse description changed: v21.7.2.7-stable
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v21.7.2.7-stable
Release notes:
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v21.7.2.7-stable
Release notes:
ClickHouse stable release v21.7.2.7-stable
M
ошибся там 300 млн строк
VG
если обе таблицы по 300м, то делайте джойн с условием, например, по одному дню и в цикле пробегаетесь по всей таблице . всё как и в других бд
M
Спасибо! поделитесь, пжлст, опытом как сделать в цикле
VG
на sql никак, напишите скрипт, который будет формировать sql запрос с WHERE t > ? and t < ? и двигаетесь по одному дню или даже по часу если всё равно данных много
M
через питон например?
VG
да хоть на пхп :)
M
@vvvjhaq @morozovsk спасибо!
DC
танк медленный, крылья не догадались прикрутить
DC
что значит безопасно? Результат запроса будет другой если надо делать final для записей с одинаковым ключом в разных партициях.
можно только на уровне запроса, через settings
можно только на уровне запроса, через settings
DC
max(coalsce( )) ?
VG
coalesce