A
--master yarn --deploy-mode clusterSize: a a a
2019 October 07
SB
снести spark_local_ip и запустить с
ща вот это пытаюсь
A
ну кластер в одной сети
неймнода на 10.90.138.32 (кластер думаю тоже в какой-то той подсети)
ваш айпи что вы ставите 10.91.51.13
2 разные подсети
то что вы видите все машинки хадупа
не значит что они видят вас =)
nat и firewall придумали уже давно, стандартная практика когда хадуп кластер в офисную сеть доступа не имеет
ваш айпи что вы ставите 10.91.51.13
2 разные подсети
то что вы видите все машинки хадупа
не значит что они видят вас =)
nat и firewall придумали уже давно, стандартная практика когда хадуп кластер в офисную сеть доступа не имеет
E
неймнода на 10.90.138.32 (кластер думаю тоже в какой-то той подсети)
ваш айпи что вы ставите 10.91.51.13
2 разные подсети
то что вы видите все машинки хадупа
не значит что они видят вас =)
nat и firewall придумали уже давно, стандартная практика когда хадуп кластер в офисную сеть доступа не имеет
ваш айпи что вы ставите 10.91.51.13
2 разные подсети
то что вы видите все машинки хадупа
не значит что они видят вас =)
nat и firewall придумали уже давно, стандартная практика когда хадуп кластер в офисную сеть доступа не имеет
А если сетка /8 ?
A
Не верю %)
ЕГ
Evgeny
А если сетка /8 ?
Когда не хватило коров для спарка, и закупили реально большой кластер)
E
Евгений Глотов
Когда не хватило коров для спарка, и закупили реально большой кластер)
Или хорошо умеют в виртуалки ;)
N
А кто-нибудь эксплуатирует Ignite? Какие впечатления?
N
Насколько он стабилен/production ready?
2019 October 08
ПФ
Насколько он стабилен/production ready?
Под какие задачи? Под какие-то я использовал
ПФ
Насчёт продакшн-реди — ну сбер признал эксперимент неудачным
N
Под какие задачи? Под какие-то я использовал
Организация быстрого кэша под горячие свежие данные.
ПФ
А объём и модель использования?
ПФ
У мен ятам были гигабайты и мн ебыли не страшны потери, мн ебыло ок
N
Идут запросы из грида с сайта, около 1000-1100 активных сессий
ПФ
Но при этом я не пытался заигрывать с тамошним SQL, например
N
Данных миллиарда 3 строк на ~120 Гб
ПФ
Идут запросы из грида с сайта, около 1000-1100 активных сессий
так активно у меня не было и не увреен что прям идеально для игнита. Не смотрели аэроспайк?
N
Пока ничего ещё не смотрел, размышляю над архитектурой.
В КХ такой поток, наверное, не пережевать будет.
В КХ такой поток, наверное, не пережевать будет.
GP
Насколько он стабилен/production ready?
он достаточно старый, опенсорса только 5 лет у него;