ЮТ
Size: a a a
2019 December 09
DC
Спасибо. А примеры такого есть? Таблица, насколько я могу судить, и создается на одной ноде. Ответ об ошибке приходит от другой ноды (если не ошибаюсь от реплики)
вам в гитхабе уже ответили. Вы делаете что-то бессмысленное. Создавайте таблицы например Engine=Memory. Temporary - это тоже Engine=Memory но они для другого.
AV
Добрый вечер. Скажите, если в mergetree order by tuple, т е нет индексов и все селекты делаю по партиции целиком, то параметр granularity не имеет значения? На скорость запросов это не повлияет? Просто у меня очень пухлые записи с большими массивами....
DC
Aleksandr Vasilev
Добрый вечер. Скажите, если в mergetree order by tuple, т е нет индексов и все селекты делаю по партиции целиком, то параметр granularity не имеет значения? На скорость запросов это не повлияет? Просто у меня очень пухлые записи с большими массивами....
имеет для многопоточности, если будет одна очень большая гранула, то только один поток будет выполнять запрос. И вроде памяти будет больше жрать для больших гранул.
AV
имеет для многопоточности, если будет одна очень большая гранула, то только один поток будет выполнять запрос. И вроде памяти будет больше жрать для больших гранул.
Спасибо!
AV
Поиграюсь
DC
но вообще mergetree order by tuple это странно. Явно misusage для КХ.
AV
но вообще mergetree order by tuple это странно. Явно misusage для КХ.
У меня просто все выборки по дневным партициям. Это минимальный квант данных получается. Можно добавить индекс внутри дня, но ведь он не будет использоваться, и будет жрать память и скорость на вставке?
DC
Aleksandr Vasilev
У меня просто все выборки по дневным партициям. Это минимальный квант данных получается. Можно добавить индекс внутри дня, но ведь он не будет использоваться, и будет жрать память и скорость на вставке?
и сколько строк в одном дне?
AV
37 млн, одна строка из массива на несколько килобайт - мегабайт в перспективе
AV
Дни регулярно перезаливаются через реплейс партишин
AV
Поэтому нарезка по дням
DC
Aleksandr Vasilev
37 млн, одна строка из массива на несколько килобайт - мегабайт в перспективе
ну ОК. я бы оставил как есть -- по-умолчанию, на таких размерах без разницы
AV
ну ОК. я бы оставил как есть -- по-умолчанию, на таких размерах без разницы
Спасибо
VU
Nikolay
Там правее в вашем запросе есть ProfileEvents. Среди них есть RWLock. Помониторьте. Может они его ждут.
['Query','InsertQuery','FileOpen','WriteBufferFromFileDescriptorWrite','WriteBufferFromFileDescriptorWriteBytes','IOBufferAllocs','IOBufferAllocBytes','ArenaAllocChunks','ArenaAllocBytes','FunctionExecute','CreatedWriteBufferOrdinary','DiskWriteElapsedMicroseconds','InsertedRows','InsertedBytes','ZooKeeperTransactions','ZooKeeperCreate','ZooKeeperMulti','MergeTreeDataWriterRows','MergeTreeDataWriterUncompressedBytes','MergeTreeDataWriterCompressedBytes','MergeTreeDataWriterBlocks','ContextLock','RWLockAcquiredReadLocks']
Все insert стабильно с RWLockAcquiredReadLocks в конце списка
Что это значит?
Все insert стабильно с RWLockAcquiredReadLocks в конце списка
Что это значит?
N
['Query','InsertQuery','FileOpen','WriteBufferFromFileDescriptorWrite','WriteBufferFromFileDescriptorWriteBytes','IOBufferAllocs','IOBufferAllocBytes','ArenaAllocChunks','ArenaAllocBytes','FunctionExecute','CreatedWriteBufferOrdinary','DiskWriteElapsedMicroseconds','InsertedRows','InsertedBytes','ZooKeeperTransactions','ZooKeeperCreate','ZooKeeperMulti','MergeTreeDataWriterRows','MergeTreeDataWriterUncompressedBytes','MergeTreeDataWriterCompressedBytes','MergeTreeDataWriterBlocks','ContextLock','RWLockAcquiredReadLocks']
Все insert стабильно с RWLockAcquiredReadLocks в конце списка
Что это значит?
Все insert стабильно с RWLockAcquiredReadLocks в конце списка
Что это значит?
Это название. Там рядом колонка со значениями.
VU
а что эти значния значат? ms?
N
Там для каждого евента своя шкала
VU
сейчас есть один зависший. Ни одно значение в profileEvents не меняется
N
Да, не видно . А perf есть возможность запустить ? Это бы позволило узнать место в коде, на котором вист сейчас.