T
Aws занимает большую часть рынка по этому вакух на нем больше
Size: a a a
2021 December 05
FM
Ну литкод заботать и любой в принципе)
T
80, мидлам будут платить ток крупные компании, в локальных обычно это уже синьорская зп, хотя сейчас рынок быстро меняется и все больше и больше компаний готовы платить. Но вообще это разговор для @datajobs
AK
Хотя и 60 по российским меркам вообще норм
S
жобс пробрались в основной чатик
DS
Сменим тему.
Есть готовые библиотеки для data QA для комбинации Scala + Spark? В стиле great expectations для Python.
Есть готовые библиотеки для data QA для комбинации Scala + Spark? В стиле great expectations для Python.
AZ
Deequ
Д
Скилл сейчас нужен один для де, это питон и еще раз питон.
ЕГ
А как же скл😐
Д
Судя по последним веянием нет питона, нет ручек 😅
Д
А там хоть бог скл.
Д
Просто для меня питон как перл, ну есть и есть, надо в сервисы, эксел, сервис напишу. Могу регресию построить, нумпаем повращать матрицы. Но не для де его...
VP
Петон в моем де мире почти везде. Кроме опенсорзных dbt/airflow много всяких самописных etl-тулов и интеграций.
VP
пайспарк, опять же
Д
Наверно все зависит от задач, мне питона при работе сданными не хватало, вернее было удобно но медленно.
VP
Ну так он не для процессинга данных, а скорее для обвязки (пульнуть SQL какой-нить )
VP
хотя и процессить можно если устраивает
Д
Ну так да, но многие этого не понимают. И потом уливлятся что медленно то ?
VP
Всему свое время ) С опытом придет понимание