Size: a a a

2020 February 07

ЕГ

Евгений Глотов in Data Engineers
Роман Пашкевич
Только хотел написать что прописал в config и все работает. Как оно упало с той же ошибкой. Видимо админами залочено)
надо в конфиге спарка писать spark.hive.<param>
источник

ЕГ

Евгений Глотов in Data Engineers
если просто hive, то может и проигнорить
источник

РП

Роман Пашкевич in Data Engineers
Евгений Глотов
надо в конфиге спарка писать spark.hive.<param>
Давай в понедельник проверим)

Но в любом случае. Огромное спасибо. Прям кайфую. Вместо часа, оно за несколько секунд вытягивает данные по кол-ву строк по дням.

Совет с запросом в скобках работает.
источник
2020 February 08

S

Sowmya Kalyani in Data Engineers
Team any Hadoop admin here
источник

РА

Рамиль Ахмадеев in Data Engineers
what is the question? there are many hadoop admins here
источник

S

Sowmya Kalyani in Data Engineers
Nothing like question. I'm new to Hadoop Admin profile
источник

S

Sowmya Kalyani in Data Engineers
Started working from 2 months
источник

S

Sowmya Kalyani in Data Engineers
Want to know if this is right group
источник

РА

Рамиль Ахмадеев in Data Engineers
yes
источник

S

Sowmya Kalyani in Data Engineers
Ok thanks
источник

AK

Alena Korogodova in Data Engineers
Sowmya Kalyani
Ok thanks
For English speakers there's another chat: Data Engineers EN
https://t.me/dataengi
источник

S

Sowmya Kalyani in Data Engineers
Thank you...but can I stay here too
источник

AK

Alena Korogodova in Data Engineers
Sure)
источник
2020 February 09

R

Renarde in Data Engineers
Сап чат, вопросик - кто то работал с Alluxio? Есть фидбек по этой технологии какой-нибудь?
источник

R

Roman in Data Engineers
Renarde
Сап чат, вопросик - кто то работал с Alluxio? Есть фидбек по этой технологии какой-нибудь?
Тоже интересно.
источник

AZ

Anton Zadorozhniy in Data Engineers
Renarde
Сап чат, вопросик - кто то работал с Alluxio? Есть фидбек по этой технологии какой-нибудь?
как обычный объектный кэш на чтение, чтобы переиспользовать кэш между разными приложениями - норм (делал с NFS и S3), но писать в них не отважился, и новые фичи не использовал
источник

AZ

Anton Zadorozhniy in Data Engineers
много всякого нужно только в энтерпрайзной версии, если что, например керберос
источник
2020 February 10

SS

Sergey Sheremeta in Data Engineers
дяденьки, здравствуйте!
вы не прикручивали такое - https://github.com/apache/hbase-connectors к HBase 1.4.* ?
хочется странного - сливать мутации HBase в богоугодную Кафку
источник

SS

Sergey Sheremeta in Data Engineers
пакость в том, что hbase-connectors написаны под HBase 2.+
источник

DG

Denis Gabaydulin in Data Engineers
Sergey Sheremeta
дяденьки, здравствуйте!
вы не прикручивали такое - https://github.com/apache/hbase-connectors к HBase 1.4.* ?
хочется странного - сливать мутации HBase в богоугодную Кафку
А как это вообще делать? Не поллить же hbase? )
источник