В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2059 membersпожаловаться на группу
2020 November 23

E

Evgeny in Data Engineers
SeniorAnykey
Всем привет.
Может кто-то поделиться опытом и впечатлениями от прикручивания кербероса к уже работающему кластеру?
И нет ли там каких-то альтернатив для авторизации?
зависит от требований и архитектуры, можно закрыть весь доступ и поставить перед кластером knox
источник
21:21пожаловаться#1

SS

Sergey Sheremeta in Data Engineers
Nikita Blagodarnyy
А dfsadmin?
как и в WebUI - сотни тыщщ
источник
21:22пожаловаться#2

N

Nikita Blagodarnyy in Data Engineers
SeniorAnykey
Всем привет.
Может кто-то поделиться опытом и впечатлениями от прикручивания кербероса к уже работающему кластеру?
И нет ли там каких-то альтернатив для авторизации?
У вас дистрибутив или ваниль?
источник
21:23пожаловаться#3

N

Nikita Blagodarnyy in Data Engineers
Sergey Sheremeta
как и в WebUI - сотни тыщщ
умные люди предлагают файловер делать.
источник
21:26пожаловаться#4

SS

Sergey Sheremeta in Data Engineers
Nikita Blagodarnyy
умные люди предлагают файловер делать.
угу, ты прав! дождусь технологического окна
источник
21:27пожаловаться#5

E

Evgeny in Data Engineers
Sergey Sheremeta
угу, ты прав! дождусь технологического окна
зачем? это вполне себе незаметно для клиентов, если НА настроен
источник
21:32пожаловаться#6

N

Nikita Blagodarnyy in Data Engineers
Evgeny
зачем? это вполне себе незаметно для клиентов, если НА настроен
а что, разве можно сделать фейловер без HA?
источник
21:43пожаловаться#7

E

Evgeny in Data Engineers
ну мало ли, вдруг под этим подразумевается переключение на secondary или что-то в этом духе
источник
21:44пожаловаться#8

N

Nikita Blagodarnyy in Data Engineers
а что вы понимаете под secondary в этом случае?
источник
21:49пожаловаться#9

E

Evgeny in Data Engineers
Nikita Blagodarnyy
а что вы понимаете под secondary в этом случае?
то же, что и в любом другом случае - secondary namenode
источник
21:56пожаловаться#10

SS

Sergey Sheremeta in Data Engineers
https://vimeo.com/15782414
Vimeo
Hadoop and NoSQL Downfall Parody
Hitler get's a bit frustrated with Hadoop and NoSQL
источник
21:59пожаловаться#11

N

Nikita Blagodarnyy in Data Engineers
Evgeny
то же, что и в любом другом случае - secondary namenode
а как можно переключиться на secondary name node? она же просто хелпер, чекпоинты fsimage собирает.
источник
22:02пожаловаться#12

E

Evgeny in Data Engineers
Nikita Blagodarnyy
а как можно переключиться на secondary name node? она же просто хелпер, чекпоинты fsimage собирает.
именно для этого и есть упоминание НА
источник
22:03пожаловаться#13

E

Evgeny in Data Engineers
если есть полноценный НА - можно переключаться
источник
22:04пожаловаться#14

N

Nikita Blagodarnyy in Data Engineers
Evgeny
ну мало ли, вдруг под этим подразумевается переключение на secondary или что-то в этом духе
вы вот тут пишите про переключение на Secondary. моей экспертизы не хватает, чтобы это осознать.
источник
22:04пожаловаться#15

E

Evgeny in Data Engineers
Nikita Blagodarnyy
вы вот тут пишите про переключение на Secondary. моей экспертизы не хватает, чтобы это осознать.
первоначальный пост был не про secondary
источник
22:05пожаловаться#16

SS

Sergey Sheremeta in Data Engineers
у меня прямо сейчас идет move кучи партиций/субпартиций/файлов из temporary-директории в target-директорию (финальная стадия spark.write) - и я что-то ссусь рисковать делать фейловер.
проверять не хочу
источник
22:12пожаловаться#17

S

SeniorAnykey in Data Engineers
Nikita Blagodarnyy
У вас дистрибутив или ваниль?
Вроде ваниль. Оно не мной поднималось.  Основная задача прикрыть вебморду yarn. Потому что ИБ.
источник
22:51пожаловаться#18

E

Evgeny in Data Engineers
тогда самое простое и быстрое - knox. Вернее так, это выглядит проще и быстрее kerberos
источник
22:52пожаловаться#19

I 

Igor  Master in Data Engineers
Renarde
И ещё вопрос - какая версия DBR?
хмм вот тут очень интересно DBR 5.5 LTS. Наверное стоит попробовать с чем то поновее. Попробую спасибо!
источник
22:59пожаловаться#20