В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2331 membersпожаловаться на группу
2021 March 01

AZ

Anton Zadorozhniy in Data Engineers
Grigory Pomadchin
спарки на ярне 3 работают как и на ярне 2 афаик
не знаю можно ли заставить спарки в докер контейнерах под ярном работать

но наверн както можно - у ярна там сеттингов милиард
Вот кмк это особенность спарка больше, ярн давно механизмы для изоляции предоставляет
источник
01:04пожаловаться#1

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
Вот кмк это особенность спарка больше, ярн давно механизмы для изоляции предоставляет
возможно
не спорю)
источник
01:04пожаловаться#2

K

KrivdaTheTriewe in Data Engineers
Интересно, кто юзает такое https://cloud.google.com/anthos/clusters/docs/on-prem/1.0/concepts/overview?hl=ru
Google Cloud
GKE On-Prem overview  |  GKE On-Prem 1.0 Documentation  |  Google Cloud
источник
01:05пожаловаться#3

GP

Grigory Pomadchin in Data Engineers
но вот сейчас спарки подбирают зависомсти с машины под ярном
источник
01:05пожаловаться#4

AZ

Anton Zadorozhniy in Data Engineers
Я никогда не видел чтобы ярн использовали как general purpose платформу для веб-сервисов и всего такого
источник
01:05пожаловаться#5

GP

Grigory Pomadchin in Data Engineers
да, но теоретически можно ¯\_(ツ)_/¯
источник
01:05пожаловаться#6

AZ

Anton Zadorozhniy in Data Engineers
Также как кубер еще страшно далёк от аналитических ворклоадов на которые ярн используют
источник
01:06пожаловаться#7

N

Nikita Blagodarnyy in Data Engineers
Grigory Pomadchin
спарки на ярне 3 работают как и на ярне 2 афаик
не знаю можно ли заставить спарки в докер контейнерах под ярном работать

но наверн както можно - у ярна там сеттингов милиард
А зачем вообще докер? Это же жава приложение. Соберите фат жар или подсуньте ему нужные provided депы с хдфс/минио/whatever.
источник
01:06пожаловаться#8

GP

Grigory Pomadchin in Data Engineers
а пример можно, где кубер не ввезет?
источник
01:06пожаловаться#9

GP

Grigory Pomadchin in Data Engineers
Nikita Blagodarnyy
А зачем вообще докер? Это же жава приложение. Соберите фат жар или подсуньте ему нужные provided депы с хдфс/минио/whatever.
я про и про жнай и про класспас который я не хочу мешать
источник
01:07пожаловаться#10

GP

Grigory Pomadchin in Data Engineers
обычно то у тебя в класспасе куча всего валяется
и у тебя вариант или все выправлять или убирать
теперь значит под разные зависимости тебе кластеры разные
источник
01:08пожаловаться#11

GP

Grigory Pomadchin in Data Engineers
или совместимость какуюто соблюдать
источник
01:08пожаловаться#12

K

KrivdaTheTriewe in Data Engineers
Nikita Blagodarnyy
А зачем вообще докер? Это же жава приложение. Соберите фат жар или подсуньте ему нужные provided депы с хдфс/минио/whatever.
а если нативные либы какие используются?
источник
01:08пожаловаться#13

AZ

Anton Zadorozhniy in Data Engineers
Grigory Pomadchin
а пример можно, где кубер не ввезет?
Вообще нет очередей, управление ресурсами (сверху) только в виде квот на неймспейсы (лимиты на поды не считаем)
источник
01:08пожаловаться#14

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
Вообще нет очередей, управление ресурсами (сверху) только в виде квот на неймспейсы (лимиты на поды не считаем)
ну очередей нет, да
источник
01:08пожаловаться#15

GP

Grigory Pomadchin in Data Engineers
Anton Zadorozhniy
Вообще нет очередей, управление ресурсами (сверху) только в виде квот на неймспейсы (лимиты на поды не считаем)
а почему лимиты на поды не считаем?
источник
01:09пожаловаться#16

GP

Grigory Pomadchin in Data Engineers
можно и на неймспейсы ковты и на поды
на каждый ран свои лимиты можешь устанавливать
т.е. это прям наалогия ярну - теж лимиты по спу и по памяти на старте
тотже оффхип
источник
01:09пожаловаться#17

GP

Grigory Pomadchin in Data Engineers
я если что не адвокат куберу там свои проблемы
просто мотивацию объясняю что не ярном едины
источник
01:10пожаловаться#18

NN

No Name in Data Engineers
Anton Zadorozhniy
Так а чем хадуп не устраивает?
Ну вот на него тут жаловались в чатике, я и хочу понять, что с ним не так. Интересно же
источник
01:10пожаловаться#19

N

Nikita Blagodarnyy in Data Engineers
KrivdaTheTriewe
а если нативные либы какие используются?
Вам встречался такой кейс, когда депы нет в мавен ценрал?
источник
01:10пожаловаться#20