Size: a a a

2021 July 17

h

helby in Data Engineers
у меня подписка, отличный ресурс. Не знаю про 100 долларов, там 12 долларов в месяц подписка, копейки по сравнению с качеством контента
источник

А

Александр in Data Engineers
вау неплохо! спасибо за ссыль
источник

IU

Igor Udovichenko in Data Engineers
Приветствую!
А есть ли канал для наивных/нубских вопросов по hdfs/hadoop?
источник

N

Nikita Blagodarnyy in Data Engineers
Есть, конечно. hadoop.apache.org
источник
2021 July 18

GP

Grigory Pomadchin in Data Engineers
тут можно если конструктивные вопросы)
источник

TD

Tilted plus Depresse... in Data Engineers
Пустая база Postgres грузит одно ядро на 100. В ней даже таблиц нет. Кто ниб с таким сталкивался?
источник

RK

Ruslan Krivoshein in Data Engineers
Не в контейнере она запущена?
источник

TD

Tilted plus Depresse... in Data Engineers
Не. На серве просто
источник

TD

Tilted plus Depresse... in Data Engineers
Мб просто цп слабый. 2 ядра.
источник

TD

Tilted plus Depresse... in Data Engineers
источник

TD

Tilted plus Depresse... in Data Engineers
Ок. Сейчас попробую. До этого пробовал такой запрос.
источник

TD

Tilted plus Depresse... in Data Engineers
Понятно. Спасибо
источник

dz

dimka ztheshek in Data Engineers
А есть какой алгоритм действий для обновления данных из foreign table?
Для примера, я в посгре, делаю фт в машку, создаю мат вьюшку. Рефрешу мат вьюшку и получаю актуальные данные. Может есть еще какой-нибудь способ сборки данных из разных удаленных серверов у себя в посгре?
источник

dz

dimka ztheshek in Data Engineers
То есть если у меня 5 удаленных таблиц и мне нужно из них собрать одну, я создал 5 мат вьюшек, рефрешу все 5 штук и дальше селекчу из всех 5.
источник

I

Ilya in Data Engineers
Ну да, так вроде все и делают. Если потом все равно что-то из 5 джоинить, можно сразу сделать матвью на джоине из нескольких залинкованных таблиц
источник

dz

dimka ztheshek in Data Engineers
окей, спасибо) А че дблинк отличается от удаленного сервера?
источник

I

Ilya in Data Engineers
Тут не подскажу. Последний раз я что-то такое лет 5 назад сам делал
источник

Н

Никита in Data Engineers
ПРивет!! Кто-нибудь в спарке "транспонировал" CDC в SCD Type 2?
Я пытаюсь сделал через dataframe API и pivot, lag выходит не совсем корректно
источник

dz

dimka ztheshek in Data Engineers
в пг есть встроенный крон? я с airflow работаю
источник

P

Pavel in Data Engineers
Имхо, это эталон наиконструктивнейшего вопроса😁😁😁
источник