PD
Аггрегация - в смысле группировка с выбором последнего, а не суммирование.
И все суммирование нужно делать поверх этой группировки в том же запросе
И все суммирование нужно делать поверх этой группировки в том же запросе
Size: a a a
2021 August 18
IA
Угу. Так и делаем. Все пашет
IA
Выбор последнего делает какойто мерж tree по таймстемпу
PD
Ну, merge tree по таймстемпу не дает гарантий.
Т.е. оно у вас работает, вам везет. Но гарантий - нет.
Т.е. оно у вас работает, вам везет. Но гарантий - нет.
IA
ArgMax
IA
Я не хочу писать sql сюда. Суть как по ссылке выше
PD
Прямо в запросе в конце или на matview?
Если второе - то у тебя в matview могут быть дубликаты, если для этой партиции будет два файла с мерджами.
Сведение до одного - не гарантируется CH
Если второе - то у тебя в matview могут быть дубликаты, если для этой партиции будет два файла с мерджами.
Сведение до одного - не гарантируется CH
IA
И там и там. Matview просто уменьшает объемы
IA
Я и написал что оптимизация такая вот... попробовали как в статье и лучше оно
PD
Хм, в статье-же не про оптимизацию, там про три стратегии дедупликации, из которых реально работает только первая, которая про "делать запрос с агрегацией сразу"
IA
полез смотреть
IA
скроллюю вниз. вижу запрос
IA
IA
>из которых реально работает только первая
это не понял
это не понял
IA
вот запрос. как он выдаст дубликаты?
PD
Так это первая стратегия и есть. И да, сам запрос - не выдаст.
А вот если это запрос генерации matview, то в matview дубликаты уже могут быть
А вот если это запрос генерации matview, то в matview дубликаты уже могут быть
IA
видимо или я или ты не до конца понял статью
IA
я понял как - matview клевая оптимизация, сэкономишь место и ram, поверх нее еще сделай вот такой запрос
IA
вообще поддержка меняющихся данных в CH сделана из рук вон плохо
IA
с неизменными все отлично