I
Переноси лучше zip
интересно во сколько сожмет lmdb с картинками и так в jpeg формате.
Size: a a a
2021 February 26
VC
Coco сжал до 25 гигов
VC
Помни, что корзину надо очищать ещё.
VC
У меня был мем табличных логов 207 гигабайт смог сжать до 307 мегабайт
I
Coco сжал до 25 гигов
что за сосо
VC
COCO - Common Objects in Context
https://cocodataset.org/#home
https://cocodataset.org/#home
I
COCO - Common Objects in Context
https://cocodataset.org/#home
https://cocodataset.org/#home
весь ? то есть фактор 3 с хвостиком на картинках.
VC
Но так легче пересылать
I
ну вот именно, картинки более чем они уже сжаты в своем формате обычно не сжимаются )
EZ
интересно во сколько сожмет lmdb с картинками и так в jpeg формате.
Дело не в сжатии а в том что один большой файл быстрее чем 1000000 мелких
EZ
Можно хоть в tar пихать
I
типо хотите сказать что mv -r будет быстрее ?
I
с драйва на коллаб
I
попробую сравню 🤷🏻♂️
VC
Там ещё по-сути вызовов api больше для маленьких файлов.
I
Там ещё по-сути вызовов api больше для маленьких файлов.
ну так может быть и параррелизация и благодаря ней ютилизация выше.
I
по-моему как раз множество мелких можно, если у гугла на то желание, так распределить, что будет эффективнее, чем один большой за раз.
I
типо как с торрентом и т.д.