Size: a a a

2019 October 03

A

Alex in Data Engineers
пол года как научился не от рута в экспериментал ветке?
источник

A

Alex in Data Engineers
Docker 19.03 introduces an experimental rootless Docker mode that helps mitigate vulnerabilities by hardening the Docker daemon
July 29, 2019
источник

λ

λoλdog in Data Engineers
Проблема в том, что по дефолту он создаёт сокет от рута. Но это можно и без новой версии пофиксить
источник

A

Alex in Data Engineers
источник

A

Alex in Data Engineers
а мужики то и не знали
источник

A

Alex in Data Engineers
сокет это чтобы с докером можно было при необходимости и от других пользователей работать, там то как раз проблем нету
источник

A

Alex in Data Engineers
проблема что сам докер демон требует запуска под рутом
источник

DY

Dan Y in Data Engineers
докер ведь вроде исправили это, хоть пока что только как TP
источник

A

Alex in Data Engineers
выше про рутлес прямо дока из мастера что умеет и что не умеет
источник

A

Alex in Data Engineers
Restrictions

и понеслась Following features are not supported
источник

A

Alex in Data Engineers
dockerd-rootless.sh uses slirp4netns (if installed) or VPNKit as the network stack by default. These network stacks run in userspace and might have performance overhead. See RootlessKit documentation for further information.
источник

A

Alex in Data Engineers
@dyasny в общем подождем посмотрим чем закончится, но там вопросов ещё достаточно много, хотя подвижки в нужном направлении уже есть
источник

DY

Dan Y in Data Engineers
они там карабкаются из жопы, но не факт что вылезут, swarm не взлетел, а всякие CRI докер не любят. остается локальщина, то есть мелкая ниша как у vagrant
источник

A

Alex in Data Engineers
пользователи на десктопах любят как и докер хаб
не любит их ентерпрайз, причем почти с самого начала когда они ломали по 100 раз апи и кастомных кернелов даже для RHEL требовали чтобы свежие версии запустить
источник

VP

Vitaly Petrov in Data Engineers
Alex
а файлик где лежит?
В HDFS
источник

VP

Vitaly Petrov in Data Engineers
На моей машине - просто в файловой системе
источник

A

Alex in Data Engineers
но это немного оффтоп =)

мне больше интересно: кто-то уже пытался использовать https://iceberg.apache.org/ ?
вроде даже в presto его поддержку смержили
источник

A

Alex in Data Engineers
@VitPetrov лезть на web ui у спарка и смотреть thread state где они висят
источник

A

Alex in Data Engineers
на воркерах
источник

DY

Dan Y in Data Engineers
Alex
пользователи на десктопах любят как и докер хаб
не любит их ентерпрайз, причем почти с самого начала когда они ломали по 100 раз апи и кастомных кернелов даже для RHEL требовали чтобы свежие версии запустить
ползвоатели на десктопах не несут миллионы долларов :)
источник