K
дрил с паркетами
какие плюсы и минусы, расскажите)
Size: a a a
2020 February 19
АЖ
даже конфиги дриловские можно вытащить 🙂
АЖ
какие плюсы и минусы, расскажите)
плюсы - sql поверх всего подряд, можно сделать вьюшку и сразу в таблё, материализации прямо в паркет на с3
минусы - в кубах работает херово, под кэш жрет диск как не в себя, не очень адекватно берет метаданные из РСУБД, у нас его в Оракле забанили в определенный момент
минусы - в кубах работает херово, под кэш жрет диск как не в себя, не очень адекватно берет метаданные из РСУБД, у нас его в Оракле забанили в определенный момент
AZ
какие плюсы и минусы, расскажите)
Самое главный минус (временный, следите за обновлениями) - не даёт обратно через себя записать рефлекции свои, это надо сбоку городить, получается такая read-only система
AZ
В HDFS и S3 поддерживает экспорты и сейчас, а вот в базы ещё никак
С
А регистрация то закрыта
AC
Сюткин
А регистрация то закрыта
местов нет))
AZ
Плюсы - это такой универсальный кэш для сатанистов, быстро можно сосать данные в любой фреймворк; работает буквально везде, и на EKS с какими-нибудь r5d просто сказка, helm upgrade set executor count и вперёд, правда дороговато, так что это только для очень требовательных клиентов
С
Ну дык дайте квоту для Сюткина и его Ко(эго)
АЖ
В HDFS и S3 поддерживает экспорты и сейчас, а вот в базы ещё никак
А нам базы не обещают :)
AZ
А нет, забыл, для GCP/GCS нет ничего
АЖ
Плюсы - это такой универсальный кэш для сатанистов, быстро можно сосать данные в любой фреймворк; работает буквально везде, и на EKS с какими-нибудь r5d просто сказка, helm upgrade set executor count и вперёд, правда дороговато, так что это только для очень требовательных клиентов
на амазоне, видимо, лучше, чем на openshift 🙂
R
а подскажите плиз, я правильно понимаю что Drill, Apache Pinot и Presto - это по сути своей решения одного порядка?
R
распределенные SQL-compatible движки с кешем - или у них есть еще какая-то хитрая функциональность?
AZ
на амазоне, видимо, лучше, чем на openshift 🙂
А какие проблемы с опеншифтом? А то мне как раз надо будет последнему он-премному клиенту что-то такое предложить
АЖ
А какие проблемы с опеншифтом? А то мне как раз надо будет последнему он-премному клиенту что-то такое предложить
ну, пришлось как минимум переписывать деплой на безрутовый
AZ
ну, пришлось как минимум переписывать деплой на безрутовый
Они свой образ ЕЕ обновили, или вы на коммьюнити версии?
АЖ
Они свой образ ЕЕ обновили, или вы на коммьюнити версии?
мы свой для EE писали, они у нас взяли 🙂
АЖ
но ребята бодрые, уже для нас патчи обещают
AZ
мы свой для EE писали, они у нас взяли 🙂
Вы наверное первый онпремный клиент с кубером для них)