Size: a a a

2019 May 22

N

Nikita Blagodarnyy in Data Engineers
Dmitriy Pavlov
Всем привет!
Тут выше были вопросы про Arenadata - так вот, я из этой компании, готов ответить на все вопросы или перенаправить к тем кто ответит 😊
Вкратце, отвечаю на то что уже задавали:
1) Мы разрабатываем, внедряем и поддерживаем платформу хранения данных на базе Greenplum, Hadoop, Clickhouse и Kafka (как все сразу так и по отдельности)
2) У нас свой Cluster Manager (Ambari скоро будет deprecated), он деплоит, обновляет, мониторит и управляет всей платформой, в том числе нативно работает с API облаков - вот тут коротенькие видосы как это работает: https://www.youtube.com/playlist?list=PLThlRr26UjnNXUuEPlarGWJIp43xVZd4X
3) Мы коммитим в OS-проекты Greenplum (в основном), Hadoop и Kafka
4) Всё что мы делаем - Open source, бинарники можно скачать на сайте, исходники на https://github.com/arenadata
5) Дизайн сайта у нас и правда отстой, знаем)
Почему с 20 февраля узел в кластер не добавить?
источник

DP

Dmitriy Pavlov in Data Engineers
Nikita Blagodarnyy
Почему с 20 февраля узел в кластер не добавить?
В какой кластер?
источник

N

Nikita Blagodarnyy in Data Engineers
Arenadata Hadoop
источник

DP

Dmitriy Pavlov in Data Engineers
Никита, речь идёт о компании, где вы работаете?
Просмотрел тикеты в нашем саппорте от вашей команды за 2019-й год, не вижу про невозможность добавить хост
источник

DP

Dmitriy Pavlov in Data Engineers
Можете прислать номер тикета, пну саппорт?
источник

N

Nikita Blagodarnyy in Data Engineers
Dmitriy Pavlov
Можете прислать номер тикета, пну саппорт?
В этом нет нужды. Все мотивированы чуть более, чем полностью. Просто когда включены все свистоперделки безопасности и используются нормальные сертификаты, то начинается совмещение теории и практики.
источник

N

Nikita Blagodarnyy in Data Engineers
Ничего не работает, и никто не знает почему.
источник

N

Nikita Blagodarnyy in Data Engineers
Тикет AS-142630
источник

l

legioner in Data Engineers
Nikita Blagodarnyy
Тикет AS-142630
У нас все ещё не разобран стенд, по поводу этого тикета
источник

l

legioner in Data Engineers
И мы воспроизводили
источник

N

Nikita Blagodarnyy in Data Engineers
Dmitriy Pavlov
Никита, речь идёт о компании, где вы работаете?
Просмотрел тикеты в нашем саппорте от вашей команды за 2019-й год, не вижу про невозможность добавить хост
Если что, я в такой голубенькой компании с огонечком. Раньше был в зелёненькой с рептилией, мало ли, не туда посмотрел.
источник

l

legioner in Data Engineers
legioner
И мы воспроизводили
С нуля
источник

l

legioner in Data Engineers
И теория с практикой сходится
источник

l

legioner in Data Engineers
По-моему, давно известны причины того, почему в данном случае не сошлось
источник

l

legioner in Data Engineers
Мы кстати все очень ждали, когда вы с отпуска вернетесь)
источник

l

legioner in Data Engineers
И не смотря на SLA тикет не закрывали
источник

N

Nikita Blagodarnyy in Data Engineers
Так-то оно, конечно, так. Только вот очень хочется hdfs dfs -put выполнять, а никак.
источник

DP

Dmitriy Pavlov in Data Engineers
Nikita Blagodarnyy
Так-то оно, конечно, так. Только вот очень хочется hdfs dfs -put выполнять, а никак.
Вижу последние рекомендации от нашей команды в тикете:
Именно этот пункт -- наличие какого-то алиаса для этого хоста в keystore -- необходимо отдельно проверить:
1. сохранить вывод команды:
> keytool -list -v -keystore /var/lib/ambari-server/keys/keystore.p12 -storepass `cat /var/lib/ambari-server/keys/pass.txt`
2. повторить действия инструкции точно, т.е. на шаге 3.2 при запросе " Existing entry alias 1 exists, overwrite? [no]:" указать no, после чего в качестве alias name указать hostname добавляемого хостa. Проверить работоспособность сервера и агента;
3. В случае неудачи шага 2 ещё раз сохранить вывод команды из шага 1. Предоставить в ответе вывод команды на этом шаге и на шаге 1.

С тех пор ответа не было :(
Получилось выполнить?
источник

N

Nikita Blagodarnyy in Data Engineers
Прошлая инструкция поставила колом кластер,hadoop инженер прибежал бледный, роняя на ходу кал, поэтому я (от греха подальше) передал задачу ему.
источник

l

legioner in Data Engineers
Впрочем ничего нового
источник