Из каких источников ?

Looking for free lancer data engineer /scala from india

There is only russian engineers))

Oh sorry

У нас его нет. Спроса нет. Пара компаний только интересовались.

Pg, psql, mongo, с осени oracle

Попытался как то одним нашим клиентам предложить попробовать KSQL, они сказали, что медленно получается и вообще не очень понравилось.
Они вместо этого приспособили кликхаус: Kafka engine -> Materialized View -> Kafka engine.

может быть очень медленно, ksqldb пишет локальный стейт в rocks на локальном диске, если дисков мало и они тормозят - будет адово просто, ну и отдельные кластера нужны для разных прикладух, никакого multitenancy

Всем привет. Может кто-то работал тут с Apache Knox. Делаю в том направлении первые шаги. Поэтому прошу не бить сильно. Кароче, получилось сделать выполнение операций на hdfs через токены. Но это только для пользователей из коробки guest и admin. Планирую добавлять новых пользователей и потом через них работать. Правильно ли я понимаю, что для этого мне либо в xmlках в topologies ручками заносить юзеров либо ставить отдельный LDAP-сервер, на LDAPе создавать юзеров и перенастроить мой Knox на работу с этим лдапом?

Ну я как обычно - вместо psql надо читать mysql. Сорри, заработался

Разобрался. Неактуально

А вы Кассандру не рассматриваете? Или у вас YDB для таких кейсов, когда по регионам и АР?

Технически YDB закрывает сценарии Кассандры, но мы понимаем, что не все готовы идти в закрытое решение. С другой стороны, такого чтобы кто-то из пользователей просил Кассандру, я тоже не помню.

Вообще мы стараемся идти либо от спроса (у нас давно просили Эластик - запустили его в Апреле, просили GP - запускаем 7-го Июля), либо от тех кейса. Кассандра пока ни туда ни туда не вписывается

У нас есть голосовалка, где пользователи вносят предложения по фичам и сервисам: https://cloud.yandex.ru/features

кто то пробовал новый tez на 11  java runtime?

Всем привет, есть вопрос
Всегда на проектах dwh крутилась на сервере
Сейчас в новой компании девопс настаивает, чтобы dwh закинули в докер с выносом папки с данными.
Подскажите насколько это безопасно и не повлияет ли на производительность?

ну и вообще, стоит или нет

dwh или базу для апишки?

если все таки двх - гоните в шею девопса этого