Телеграмм чат группы hadoopusers страница 3145

2021 January 15

GP

Grigory Pomadchin in Data Engineers

ясно

источник

23:17пожаловаться #1

АЖ

Андрей Жуков... in Data Engineers

Dmitry Zuev

А ты заскейли минио

вот это сейчас больно было

источник

23:19пожаловаться #2

AZ

Anton Zadorozhniy in Data Engineers

Повелитель Бури

Привет! Друзья, пользуюсь минио же 2 месяца и забыл hdfs как страшный сон. Кто то еще не перешел? Если нет то почему?

У нас там и паркеты и json

Не очень понятный вопрос, вы пытаетесь найти причины перейти на HDFS? Или уговорить кого-то перейти на minio? Причин может быть много: производительность, совместимость, операционные процессы; HDFS используется где данных много, там просто так не перепрыгивают с компонента на компонент

источник

23:22пожаловаться #3

N

Nikita Blagodarnyy in Data Engineers

er@essbase.ru

Народ, есть у кого примеры настройки jdbc для hive под керберос ? Вот мучаюсь с. Status : Failure -Test failed: [Cloudera][HiveJDBCDriver](500164) unable 500169 peer indicated failure has initiate failed

А в логе хайва што? Он обычно внятно пишет.

источник

23:43пожаловаться #4

2021 January 16

R

Renarde in Data Engineers

Повелитель Бури

Привет! Друзья, пользуюсь минио же 2 месяца и забыл hdfs как страшный сон. Кто то еще не перешел? Если нет то почему?

У нас там и паркеты и json

жирно, как у бабули в деревне!

источник

00:55пожаловаться #5

R

Renarde in Data Engineers

ME

Max Efremov in Data Engineers

Повелитель Бури

Привет! Друзья, пользуюсь минио же 2 месяца и забыл hdfs как страшный сон. Кто то еще не перешел? Если нет то почему?

У нас там и паркеты и json

У нас S3)

источник

00:56пожаловаться #7

KS

K S in Data Engineers

Подскажите пожалуйста как можно красиво конвертнуть все поля в датафрейме (pandas) по списку в string?
Или ещё лучше по типу, например
df_converted = (if df._.dtype == 'object': df._.dtype.astype(str))

источник

04:09пожаловаться #8

KS

K S in Data Engineers

Всего в датафрейме 132 поля и ломает создавать список и пробегать по нему в цикле. Наверное есть что-то типа