Size: a a a

2019 July 31

RI

Rustam Iksanov in Data Engineers
Anton Zadorozhniy
СУБД нормальную пробовали?
Пока еще нет, но к этому все идет.
источник

AZ

Anton Zadorozhniy in Data Engineers
Rustam Iksanov
Пока еще нет, но к этому все идет.
Все зависит от того что вы ускоряете, если какие-то адхок селекты без каких-то особенных заморочек - попробуйте ллап, престо, а потом добро пожаловать к нам))
источник

RI

Rustam Iksanov in Data Engineers
Anton Zadorozhniy
Все зависит от того что вы ускоряете, если какие-то адхок селекты без каких-то особенных заморочек - попробуйте ллап, престо, а потом добро пожаловать к нам))
К вам это куда? в чат?
источник

AZ

Anton Zadorozhniy in Data Engineers
Rustam Iksanov
К вам это куда? в чат?
В мир MPP СУБД
источник

RI

Rustam Iksanov in Data Engineers
Anton Zadorozhniy
В мир MPP СУБД
понял, спс за подсказку.
источник

AZ

Anton Zadorozhniy in Data Engineers
Престо если сделать с душой (или заплатить нашим польским коллегам) - очень неплохо может ускорить селекты
источник

AZ

Anton Zadorozhniy in Data Engineers
источник

A

Ako in Data Engineers
Тут же можно искать себе коллег?
источник

EV

Eduard Vlasov in Data Engineers
источник

A

Ako in Data Engineers
Спасибо!
источник

RI

Rustam Iksanov in Data Engineers
@dartov а не могли бы подсказать, что за глюк чтения phoenix через spark. в hbase таблица лежит с namespace. И в phoenix через jdbc указываешь через namespace:table. Также указываю при чтении из spark "table" -> "namespace:table" спарк падает с ошибкой, что таблицы namespace.table не найдено.
источник

AZ

Anton Zadorozhniy in Data Engineers
Rustam Iksanov
@dartov а не могли бы подсказать, что за глюк чтения phoenix через spark. в hbase таблица лежит с namespace. И в phoenix через jdbc указываешь через namespace:table. Также указываю при чтении из spark "table" -> "namespace:table" спарк падает с ошибкой, что таблицы namespace.table не найдено.
а вы view или таблицу создали в самом финиксе? вообще финикс не как хайв сделан, вам нужно через финикс создать таблицу, он зарегистрирует ее и даст вам работать с ней, а не так что у вас есть таблица откуда-то, и вы хотите финикс натянуть на нее
источник

RI

Rustam Iksanov in Data Engineers
Понял, спс!
источник

AZ

Anton Zadorozhniy in Data Engineers
источник

AZ

Anton Zadorozhniy in Data Engineers
то есть натягивание есть, но там есть caveats как написано в документации
источник

AZ

Anton Zadorozhniy in Data Engineers
вторичных индексов там точно не будет, плюс проблемы с типами
источник

RI

Rustam Iksanov in Data Engineers
Вот на проблемы с типами я и попал уже.
источник

AZ

Anton Zadorozhniy in Data Engineers
Rustam Iksanov
Вот на проблемы с типами я и попал уже.
пишите/читайте спарком через phoenix-spark и будет вам счастье
источник

RI

Rustam Iksanov in Data Engineers
Anton Zadorozhniy
пишите/читайте спарком через phoenix-spark и будет вам счастье
Спс, наконец-то все поменты разложились.
источник
2019 August 01

N

Nika in Data Engineers
А есть ли резон какой то использовать structured streaming, и получается самому офсет не закомитить в конце?
источник