F🚜
Много потоков. Они читают разные куски. Кто успел первым получается в начале.
Спасибо. Какой-то способ избежать этого, кроме max_threads=1 и подзапроса с order?
Size: a a a
2019 December 06
DC
Спасибо. Какой-то способ избежать этого, кроме max_threads=1 и подзапроса с order?
Order by необходим.
DL
И как это сделать в консоли ?
Какой из 3 способов вы попробовали?
Какой из 3 способов вы попробовали?
я делал с помощью
INSERT (column) SELECT maxMerge(15)F🚜
Order by необходим.
если я просто добавляю
order by Time (колонка со временем), то запрос ругается, что она не под группировкойDC
я делал с помощью
INSERT (column) SELECT maxMerge(15)Вы понимаете -- это бред. Это не заливка потока. Так на проде вставлять не получится. Пробуйте способ 3 -- у вас все получится. В способе 2 написано что вам нажны simpleaggregstionfunction которые в 2 раза быстрее и занимают меньше места. Использовать надо способ 1.
DL
окей, спасибо.
KS
Коллеги, юобрый день! Подскажите, пожалуйста, реализована ли в библиотеке clickhouse-go поддержка флага
any_join_distinct_right_table_keys=1. Если нет, то как пользоваться старыми джоинами?Вот сюда добавьте https://github.com/ClickHouse/clickhouse-go/blob/master/query_settings.go и PR сделайте ;)
SТ
Прости кис, закрутился(
DC
Nikolay
Как может быть такое , что Optimize DEDUPLICATE не удалил дубликаты из таблицы,а FINAL удалил ?
и это правильно, так и задумано.
- Если указать
- Если указать
DEDUPLICATE, то произойдет схлопывание полностью одинаковых строк (сравниваются значения во всех колонках), имеет смысл только для движка MergeTree.
N
и это правильно, так и задумано.
- Если указать
- Если указать
DEDUPLICATE, то произойдет схлопывание полностью одинаковых строк (сравниваются значения во всех колонках), имеет смысл только для движка MergeTree.У меня они не схлопнулись почему то. Вот я так и ожидал. Движек реплэйсингмерджтри
DC
Nikolay
У меня они не схлопнулись почему то. Вот я так и ожидал. Движек реплэйсингмерджтри
повторяю: и это правильно, так и задумано.
DC
Artemeey Gavryushin
Добрый день!
Заранее извиняюсь, что задаю заезжанный вопрос, мало ли что-то имзенилось в новых версиях в JOIN
>SELECT id, name FROM ids
>JOIN (SELECT id, name FROM ids_names) USING id
-- ids - миллоин строк
-- ids_names - 100 строк
-- результат 100 строк, прочитано миллон строк (fullscan)
Как переписать запрос, чтобы не было fullscan без использования дополнительного подзапроса?
Заранее извиняюсь, что задаю заезжанный вопрос, мало ли что-то имзенилось в новых версиях в JOIN
>SELECT id, name FROM ids
>JOIN (SELECT id, name FROM ids_names) USING id
-- ids - миллоин строк
-- ids_names - 100 строк
-- результат 100 строк, прочитано миллон строк (fullscan)
Как переписать запрос, чтобы не было fullscan без использования дополнительного подзапроса?
И вообще final это не аналог DEDUPLICATE
DC
optimize table DEDUPLICATE
optimize table DEDUPLICATE FINAL
делают разное
optimize table DEDUPLICATE FINAL
делают разное
N
А что тогда значит deduplication в конструкции optimize?
N
Что делает dedup с данными в таблице ?
DC
Nikolay
А что тогда значит deduplication в конструкции optimize?
- Если указать
optimize table DEDUPLICATE FINAL -- то произойдет схлопывание полностью одинаковых строк даже в партициях где один парт
DEDUPLICATE, то произойдет схлопывание полностью одинаковых строк (сравниваются значения во всех колонках), имеет смысл только для движка MergeTree.optimize table DEDUPLICATE FINAL -- то произойдет схлопывание полностью одинаковых строк даже в партициях где один парт
DC
Nikolay
Что делает dedup с данными в таблице ?
только для движка MergeTree
- Если указать
- Если указать
DEDUPLICATE, то произойдет схлопывание полностью одинаковых строк (сравниваются значения во всех колонках), имеет смысл только для движка MergeTree.N
А точно по всем колонкам сравнивает а не по примари ключу ?
N
ver — столбец с версией, тип UInt*, Date или DateTime. Необязательный параметр.
При слиянии, из всех строк с одинаковым значением первичного ключа ReplacingMergeTree оставляет только одну:
Последнюю в выборке, если ver не задан.
С максимальной версией, если verзадан.
Это из доки по КХ
При слиянии, из всех строк с одинаковым значением первичного ключа ReplacingMergeTree оставляет только одну:
Последнюю в выборке, если ver не задан.
С максимальной версией, если verзадан.
Это из доки по КХ