Телеграмм чат группы hadoopusers страница 1582

Size: a a a

Data Engineers

1724 membersпожаловаться на группу

2019 August 26

Polina Azarova in Data Engineers

Там формат даты и ещё какая-то дичь в json поменялись
Можно подложить эти поля)

источник

12:14пожаловаться #1

Eldar Nezametdinov in Data Engineers

короче там все в хдп было (/user/zeppelin/notebook/), туда залил старые, рестарт помог
но в конфиге:
zeppelin.notebook.storage: org.apache.zeppelin.notebook.repo.FileSystemNotebookRepo

источник

12:15пожаловаться #2

АЖ

Андрей Жуков in Data Engineers

Eldar Nezametdinov

@barloc, а ты не верил 🙂

источник

12:22пожаловаться #3

Alexander Piminov in Data Engineers

Eldar Nezametdinov

Ну так "all notes are saved in the notebook folder in hadoop compatible file system - FileSystemNotebookRepo".

источник

12:22пожаловаться #4

Eldar Nezametdinov in Data Engineers

да да

источник

12:22пожаловаться #5

Eldar Nezametdinov in Data Engineers

просто название) ну такое)

источник

12:22пожаловаться #6

Stanislav in Data Engineers

Андрей Жуков

@barloc, а ты не верил 🙂

угу
потому что в тройке потерял все ноутбуки во время бага

источник

12:23пожаловаться #7

Eldar Nezametdinov in Data Engineers

кстати

источник

12:23пожаловаться #8

Eldar Nezametdinov in Data Engineers

1. как обезопаситься от падения ноды с амбари?
2. допустим амбари-сервер нода умерла, как жить дальше?

источник

12:24пожаловаться #9

Anton Zadorozhniy in Data Engineers

Eldar Nezametdinov

1. как обезопаситься от падения ноды с амбари?
2. допустим амбари-сервер нода умерла, как жить дальше?

из коробки HA у амбари еще нет (тикет AMBARI-17126), поэтому все делаем постаринке и руками: 1) база под абмари внешняя и с HA 2) доступа через LB 3) конфигурация самого сервера хранится внешне и/или часто бэкапится 4) делаем фейловер через какой-нибудь keepalived или что-то подобное

источник

12:29пожаловаться #10

Anton Zadorozhniy in Data Engineers

и вариант для тех кто побогаче - ставим амбари на VM (в клауде, приватном или публичном, смотря где живете)

источник

12:30пожаловаться #11

Sergey Safonov in Data Engineers

Вижу спецификацию, сервер реляционной БД, вроде бы Postgre. В разделе HDD написано 70 + 250 ТБ. Так может быть ?

источник

17:22пожаловаться #12

Nikita Blagodarnyy in Data Engineers

Коллеги, а в обычной, безхадупной java есть что-то похожее на DataFrame/DataSet?