Зато менеджмент может говорить что у нас всё как в ЦРУ.

😂 ну это я полагаю может говорить любая компания у которой есть: табло/терадата/оракл/...

все у цру

Всем привет. Встала задача использовать конструкцию вида DELETE FROM T1 JOIN T2 SOME CONDITION в дельте. У меня пока что единственная идея - заюзать так себе решение типа: 1) вычислить записи на удаление в T1, 2) эти записи собрать в список, 3) удалить записи либо через IN (применяя SparkSQL или выражение в инструкции DELETE). Опасения, что записей в проде может быть много и эта идея станет нерабочей. Что можно еще сделать?

У них разные продукты есть, но основная специализация это ОРД, и тут они довольно хороши

Все, подсказали. Сделать селект и оверрайт таблицы. Легко и просто

Я обычно очень боюсь делать оверврайты в таблицы, вместо этого делаю запись в промежуточную таблицу, и после дор проверки, меняю их местами

А ОРД это..?

организационно-распорядительная документация

В жизни бы не догадался. А о чем это вообще?)

Это шутейка. Речь видимо шла про оперативно-разыскную деятельность. Да, я не наркоман, именно рАзыскную, через «а».

А.
Ну ладно.
Я, кстати, не граммар-наци, если что.)

Да, именно та самая деятельность

ОРД это такой специальный воркфлоу, там сочетается графовый анализ, работа с документами, FTS и бизнес-процессы (выставляются задачи людям «в полях», результаты работы в поле тут же добавляются в кейс)

коллеги, здравствуйте! тут вроде есть кто-то из Altinity, да? можете примерный ценник озвучить за терабайт сырых данных (терабайт в MergeTree таблице на однонодовом "кластере") ?

(закатывая глаза: вот бы сравнение по ТСО с каким-нибудь редшифтом/бигквери)

Уважаемые, подскажите, где получать опыт и реально ценные знания в области DE, если ты простой DA(sql, python, r)

Желательно в big data

Как и везде:
1) Читать, думать, применять и снова думать.
2)Сесть рядом с процессами и отслеживать их жизненный цикл
3) выкрутить работодателя на максимальный консультативный кэш от вендоров и их конкурентов. И нещадно его копать. У некоторых опыт десятилетий накоплен.

проявлять инициативу. Знания, наверняка, есть (для начала точно хватит - питон, sql). Предлагать, стягивать на себя часть одеяла не с целью денег, но с целью опыта. И не упускать возможности 😊