Size: a a a

ClickHouse не тормозит

2019 December 09

N

Nikolay in ClickHouse не тормозит
А какой у вас дживек таблицы ?
источник

D

Deze in ClickHouse не тормозит
Добрый день. С чем может быть связана ошибка Code: 442, e.displayText() = DB::Exception: There was an error on [<host>:9000]: Code: 442, e.displayText() = DB::Exception: Temporary tables cannot be inside a database. You should not specify a database for a temporary table. (version 19.13.7.57 (official build)) (version 19.13.7.57 (official build))
при запросе
curl --silent 'http://<host>:8123/?session_id=123&user=<user_name>&session_timeout=3600&password=<password>' --data 'CREATE TEMPORARY TABLE p_47_626_1537126630 ON CLUSTER <cluster_name> (rdid String)' ?
источник

KK

Kostya Kakunin in ClickHouse не тормозит
Deze
Добрый день. С чем может быть связана ошибка Code: 442, e.displayText() = DB::Exception: There was an error on [<host>:9000]: Code: 442, e.displayText() = DB::Exception: Temporary tables cannot be inside a database. You should not specify a database for a temporary table. (version 19.13.7.57 (official build)) (version 19.13.7.57 (official build))
при запросе
curl --silent 'http://<host>:8123/?session_id=123&user=<user_name>&session_timeout=3600&password=<password>' --data 'CREATE TEMPORARY TABLE p_47_626_1537126630 ON CLUSTER <cluster_name> (rdid String)' ?
как я понимаю нет временных таблиц можно memory заюзать - см доку https://clickhouse.yandex/docs/ru/operations/table_engines/
источник

VU

Vladislav U. in ClickHouse не тормозит
Nikolay
А какой у вас дживек таблицы ?
Distributed за ней ReplicatedMergeTree и есть еще 3 десятка MV которые в summing
источник

VU

Vladislav U. in ClickHouse не тормозит
Nikolay
Там правее в вашем запросе есть ProfileEvents. Среди них есть RWLock. Помониторьте. Может они его ждут.
в след раз как случится посмотрю, спасибо.
А если есть что это значит?
источник

МЮ

Макс Юю in ClickHouse не тормозит
здравствуте. подскажите как создать и  загрузить данные из csv в таблицу
источник

S

Slach in ClickHouse не тормозит
Макс Юю
здравствуте. подскажите как создать и  загрузить данные из csv в таблицу
источник

МЮ

Макс Юю in ClickHouse не тормозит
INSERT INTO [db.]table [(c1, c2, c3)] FORMAT CSV "tmp/foo.csv"

правельно я понимаю
источник

KK

Kostya Kakunin in ClickHouse не тормозит
Макс Юю
здравствуте. подскажите как создать и  загрузить данные из csv в таблицу
если базу перегнать то на яве это заюзал и допилил под себя https://github.com/llofberg/db-copy
источник

МЮ

Макс Юю in ClickHouse не тормозит
Kostya Kakunin
если базу перегнать то на яве это заюзал и допилил под себя https://github.com/llofberg/db-copy
спасибо но нужны только запросы без стронеего по а то я бы кананул на го его
источник

Н

Николай in ClickHouse не тормозит
Kostya Kakunin
если базу перегнать то на яве это заюзал и допилил под себя https://github.com/llofberg/db-copy
Чем не устроил стандартный INSERT ... FORMAT CSV?
источник

МЮ

Макс Юю in ClickHouse не тормозит
Николай
Чем не устроил стандартный INSERT ... FORMAT CSV?
я не смог найти в документации как в целом эта процедура делаеться
нужно ли сздавать бд а потом вставлять и т.д.
источник

KK

Kostya Kakunin in ClickHouse не тормозит
Николай
Чем не устроил стандартный INSERT ... FORMAT CSV?
мне нужен был перегон из postgresql в clickhouse и много данных - но я да так  почти и делал простно на движке
источник

МЮ

Макс Юю in ClickHouse не тормозит
1 тб
источник

KK

Kostya Kakunin in ClickHouse не тормозит
порциями фигачить или через мост jdbc-bridge https://github.com/ClickHouse/clickhouse-jdbc-bridge я просто джавист а вы можете на GO
источник

Н

Николай in ClickHouse не тормозит
Макс Юю
я не смог найти в документации как в целом эта процедура делаеться
нужно ли сздавать бд а потом вставлять и т.д.
https://clickhouse.yandex/docs/en/interfaces/formats/#csv
Но не уверен, что это подойдёт для терабайтного файла.
источник

МЮ

Макс Юю in ClickHouse не тормозит
Николай
https://clickhouse.yandex/docs/en/interfaces/formats/#csv
Но не уверен, что это подойдёт для терабайтного файла.
да я читал эту статью не могу связать пока все воедино
источник

МЮ

Макс Юю in ClickHouse не тормозит
Kostya Kakunin
порциями фигачить или через мост jdbc-bridge https://github.com/ClickHouse/clickhouse-jdbc-bridge я просто джавист а вы можете на GO
задача состаит в том чтоб все в начале выгрузить в файл а потом из файла залить в новые таблицы
без написания сервиса
источник

МЮ

Макс Юю in ClickHouse не тормозит
спасибо за помощь чуть позже сделаю запросы кину ответы сюда
источник

KK

Kostya Kakunin in ClickHouse не тормозит
Макс Юю
спасибо за помощь чуть позже сделаю запросы кину ответы сюда
тут описан велосипед то что вам нужно но у меня проблемы с интом —  https://www.altinity.com/ — там NY taxi и вот "велик" https://clickhouse.yandex/docs/en/getting_started/example_datasets/nyc_taxi/
источник