AS
там есть большой продукт, который идет со своим питоном.. он импортирует классы, которые я могу написать.. вот из них прочитать паркет
Size: a a a
2019 August 19
AS
если есть сопособ использовать свое окружение внутри класса, который будет импортирован непонятно во что, это могло бы решить проблему
АЖ
если есть сопособ использовать свое окружение внутри класса, который будет импортирован непонятно во что, это могло бы решить проблему
втащить в себя какой-нибудь фастпаркет?
AS
втащить в себя какой-нибудь фастпаркет?
он все равно построен поверх пандас.. или как понимать втащить в себя?
АЖ
он все равно построен поверх пандас.. или как понимать втащить в себя?
https://github.com/jcrobak/parquet-python - например
Вот только даже у него есть зависимости, пусть и не от пандаса
Вот только даже у него есть зависимости, пусть и не от пандаса
АЖ
снеппи-то все равно надо раскодировать
AS
выглядит не так огромно, как с пандосом.. сейчас попробую и отпишусь
AS
https://github.com/jcrobak/parquet-python - например
Вот только даже у него есть зависимости, пусть и не от пандаса
Вот только даже у него есть зависимости, пусть и не от пандаса
Спасибо большое! Эта штука завелась. В итоге были проблемы с зависимостями если ставить через pip install parquet.. но ручками я собрал без проблем.. Еще раз большое СПАСИБО!
АЖ
Спасибо большое! Эта штука завелась. В итоге были проблемы с зависимостями если ставить через pip install parquet.. но ручками я собрал без проблем.. Еще раз большое СПАСИБО!
Вот и славно. На здоровье
2019 August 20
K
Anyone in need of image data labelling here? We are looking for a pilot project to test our "Laas" on. It's free - you don't have to pay a cent.
ПФ
How to tell about position not giving any useful information
ПФ
а зачем асбтрагироваться от типа менеджера?
Ну а вдруг завтра война, а ты не готов не переписывая код перейти на другой менеджер
ПФ
А вообще намёк, наверное, на покупку клаудерой хортона и тебе и правда может понадобитьсяперейти на другой менеджер 😊 Типа йарна болье не будет
DM
а зачем асбтрагироваться от типа менеджера?
Имхо бессмысленно, потому что они настолько разные, что общего очень мало (зато прослойка будет lightweight). Ну и по архитектуре они в итоге все равно ничего не прячут (если я правильно понял про policy и shim). Просто легковесная одна точка входа, которая имеет очень абстрактные цели и сильно ограничена нижклежащими компонентами.
AZ
Дамы и господа, кто из вас держит ML пайплайны, расскажите пожалуйста где вы держите и как трекаете данные для обучения и/или валидации моделей?
R
Дамы и господа, кто из вас держит ML пайплайны, расскажите пожалуйста где вы держите и как трекаете данные для обучения и/или валидации моделей?
Dvc вроде решаем вопросы с версионированием данных для обучения
AZ
Dvc вроде решаем вопросы с версионированием данных для обучения
привет, спасибо. А храните прямо в гите или в с3?