SB
И ETL какой-нибудь
Size: a a a
2019 June 27
A
Лучше сформулировать вопрос максимально детально и предметно и написать сюда: info@arenadata.io
A
Избегая фраз "какой-нибудь ETL" ))
SB
Anton Kovalenko
Избегая фраз "какой-нибудь ETL" ))
Я только вхожу в эту область. И в дистрибутив с готовой песочницей гораздо проще войти.
GG
Я только вхожу в эту область. И в дистрибутив с готовой песочницей гораздо проще войти.
A
Я только вхожу в эту область. И в дистрибутив с готовой песочницей гораздо проще войти.
От коллег поступил ответ на вопрос. Ответ - нет. ) Поэтому может имеет смысл для игры с песочницей действительно воспользоваться их дистрибутивом
A
Дополнение: Есть blueprint для быстрого развертывания
GG
Anton Kovalenko
Дополнение: Есть blueprint для быстрого развертывания
Wtf is blueprint ?
GG
Я в последний раз это слово видел в нутаниксе )
A
Без понятия. "Мопед не мой, я только продаю" ))
SB
Anton Kovalenko
От коллег поступил ответ на вопрос. Ответ - нет. ) Поэтому может имеет смысл для игры с песочницей действительно воспользоваться их дистрибутивом
Спасибо. Но жаль, конечно. Все-таки ваш дистрибутив со своими плюсами - с близкой поддержкой
A
Вот авто-скрипт для развертывания ADH 1.6 на одном узле/VM
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
A
Спасибо. Но жаль, конечно. Все-таки ваш дистрибутив со своими плюсами - с близкой поддержкой
Не все сразу. Может и сделаем. Нов в данный конкретный момент нет
SB
Anton Kovalenko
Вот авто-скрипт для развертывания ADH 1.6 на одном узле/VM
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
Да найдем такую VM 🙂 На VirtualBox поднимется или VMWare нужна?
GG
Anton Kovalenko
Вот авто-скрипт для развертывания ADH 1.6 на одном узле/VM
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/ambari-server-deploy-adh.sh
И Blueprint:
https://storage.googleapis.com/arenadata-repo/ambari/2.6.2/tools/blueprint-ADH16-Single-Node.json
Вызов следующий:
bash ambari-server-deploy-adh.sh -f ./blueprint-ADH16-Single-Node.json -c ADH16
где:
f - файл blueprint
с - имя будущего кластера
Минимально нужна VM: 6 VCores, 32GB RAM, 35GB HDD и доступ в интернет.
Не планируете инсталлятор как у openshift - на базе ansible плейбуков ? Это вообще, кмк, идеальный вариант для всех интересантов процесса
A
Не планируете инсталлятор как у openshift - на базе ansible плейбуков ? Это вообще, кмк, идеальный вариант для всех интересантов процесса
Если не путаю, ADCM вроде так и работает
GG
Но adh-то не так 🤯
S
Больше Spark интересует
скачать архив спарка и запустить нативно
можно даже в пайчарме pip install pyspark или идее (чтото неразборчивое)
можно даже в пайчарме pip install pyspark или идее (чтото неразборчивое)
S
зачем для этого дистр - хз
SB
Хочется по-взрослому всё. Чтобы научиться и потом на хорошую позицию уйти