Size: a a a

2020 April 08

p

pragus in DevOps
Phil Kulin
А s3 кроме шаринга конечно всем хороша
уже 10 млн файлов делают большинству posix fs больно
источник

p

pragus in DevOps
когда у тебя ~ 500 млн - все очень плохо
источник

p

pragus in DevOps
по этой причине решения где 1 объект маппится в 1 файл на диске подходят лишь для тестов
источник

PK

Phil Kulin in DevOps
pragus
уже 10 млн файлов делают большинству posix fs больно
Это не зависит от S3 или нет. Сделай миллион на minio (и вроде осенью же делали) - тебе станет ещё хуже просто fs
источник

p

pragus in DevOps
Phil Kulin
Это не зависит от S3 или нет. Сделай миллион на minio (и вроде осенью же делали) - тебе станет ещё хуже просто fs
Фил, я тебя не понял
источник

PK

Phil Kulin in DevOps
pragus
Фил, я тебя не понял
Запихай в minio пару лямов файлов и вернись со сравнительной характеристикой с fs :)
источник

p

pragus in DevOps
Phil Kulin
Запихай в minio пару лямов файлов и вернись со сравнительной характеристикой с fs :)
https://github.com/minio/minio/issues/8715

почему не ceph? ты путаешь проблемы minio и протокол s3
источник

BG

Bogdan (SirEdvin) Gladyshev in DevOps
Phil Kulin
Это не зависит от S3 или нет. Сделай миллион на minio (и вроде осенью же делали) - тебе станет ещё хуже просто fs
Если дробить по папкам, не станет
источник

N

Navern in DevOps
minio  <<<<<< s3
источник

AA

Artyom Abramovich in DevOps
хз о чем там opennet писал (про 5.6 ядро и selinux), но
$ uname -r
5.6.2-300.fc32.x86_64

$ sestatus
SELinux status:                 disabled
источник

PK

Phil Kulin in DevOps
Bogdan (SirEdvin) Gladyshev
Если дробить по папкам, не станет
Если дробить по папкам и в fs всё ок
источник

PK

Phil Kulin in DevOps
А ты не путаешь протокол S3 и особенности амазона или ceph?
источник

N

Navern in DevOps
существует протокол s3?
источник

AA

Artyom Abramovich in DevOps
Navern
существует протокол s3?
tcp, udp, s3 :)
источник

N

Navern in DevOps
Artyom Abramovich
tcp, udp, s3 :)
:)
источник

PK

Phil Kulin in DevOps
Navern
существует протокол s3?
Не придирайся
источник

p

pragus in DevOps
Phil Kulin
Если дробить по папкам и в fs всё ок
вот у тебя 20млн файлов, сколько их удаление будет занимать? ;)
источник

p

pragus in DevOps
ну или поиск
источник

PK

Phil Kulin in DevOps
Много. Я так понимаю, на любых S3 тоже
источник

PK

Phil Kulin in DevOps
И ещё дольше возможно
источник