ММ
Даже если мы говорим не про куб
Size: a a a
2021 July 13
GG
В хорадрическом кубе плохие ингредиенты превращаются в известную субстанцию
A
Фс прост на отдельных нодах юзать
ММ
Сложно выкинуть из контейнера с Jupyter ноутбуком саентиста, которому нужно хранить в этом shared storage ноутбуки и данные
GG
Сайентист умеет в с3
GG
Сюрприз-сюрприз
GG
А джупитер - ну, можно синкать с гитом как-то
ММ
И заставить клонировать все свои репозитории после смерти контейнера
GG
Что-то такое
GG
Даже в эйрфлоу научились стейт в постгрес хранить
GG
Всего лишь во второй версии
ММ
Не путай airflow с его метаданными, под которые вполне подходит БД, и блобы на несколько десятков Гб
AP
У меня на 9м дебе нфс вёл себя адекватно, обновился до 10ки и пошло говно. Серверу пофигу, а клиенты лок ловят на ядре, вплоть до хард ресета. Пришлось быстро на s3 переползать
GG
Блобы на с3, ноутбуки в БД ) все честно
GG
Или ты серьезно думаешь, что ноутбуки гигОбайты ?
ММ
git тогда куда
GG
Ну, или ноутбуки в гит
ММ
Не ноутбуки, датасеты для обучения весят гигабайты
GG
Датасеты в dcs
GG
Или как оно там