AZ
пг 11 и моложе очень неплохо умеет параллелить хэш джоины к слову
Size: a a a
2020 January 29
AS
в спарке проблема это ad hoc запросы. если в них потребности нет то спарка вам хватит. если нет и пг не хватает то кх и т.п.
DZ
в чем проблема?
zeppelin и в путь
zeppelin и в путь
DZ
или там thrift server в конце концов
AZ
в чем проблема?
zeppelin и в путь
zeppelin и в путь
zeppelin или другой ноутбук/способ доступа не делают спарк более эффективным для ад-хок запросов
DZ
ну я имел ввиду adhoc к персищеным вьюхам
AZ
контекст шэринг, изоляция тасков внутри контекста, нормальная статистика и основанный на ней планировщик запросов - все это пока только в пути, и появится не скоро, так что если нужна высокая производительность/управляемость на ад-хок запросах то лучше сейчас взять нормальную СУБД
S
в спарке проблема это ad hoc запросы. если в них потребности нет то спарка вам хватит. если нет и пг не хватает то кх и т.п.
там биай так-то потребитель
N
В КХ нет планировщика
AZ
Nikolay
В КХ нет планировщика
я КХ и не предлагал)
N
стоимостного
K
контекст шэринг, изоляция тасков внутри контекста, нормальная статистика и основанный на ней планировщик запросов - все это пока только в пути, и появится не скоро, так что если нужна высокая производительность/управляемость на ад-хок запросах то лучше сейчас взять нормальную СУБД
Хайв взять
K
И ходить в неё Спарком
VS
Старком?
K
Старком?
Апаче Старк
VS
VS
А что это?
AZ
Хайв взять
это ближе, но все равно так себе в плане управляемости и производительности
K
это ближе, но все равно так себе в плане управляемости и производительности
Ну годовой отчёт будет строить быстрее