Size: a a a

Storage Discussions

2020 October 13

A

Alexandr in Storage Discussions
Максим Ганин
Снижение производительности идёт при интенсивно io. А именно когда не успевает гарбедж коллектор работать.
Точняк если у вас схд с дедупом и компресией
источник

МГ

Максим Ганин... in Storage Discussions
А как это влияет на заполнение блоков?
источник

A

Alexandr in Storage Discussions
Максим Ганин
Снижение производительности идёт при интенсивно io. А именно когда не успевает гарбедж коллектор работать.
Более того гарбедж коллект  еще сильно грузит схд и диск при большом обновлении данных т.е. у Вас витрина интернет магазины вы в 00.01 все удалили и все заново загрузили и при этом если большая база или большой объем данных то схд с дедупом и компрестей будет мягко говоря тяжело и в некоторой степени плохо
источник

МГ

Максим Ганин... in Storage Discussions
Alexandr
Более того гарбедж коллект  еще сильно грузит схд и диск при большом обновлении данных т.е. у Вас витрина интернет магазины вы в 00.01 все удалили и все заново загрузили и при этом если большая база или большой объем данных то схд с дедупом и компрестей будет мягко говоря тяжело и в некоторой степени плохо
Очень слабо верится в такой кейс что я в 0:01 буду удалять петабайты данных и в эту же минуту их загружать.
Нереален ваш кейс.

Ну и вообще мы говорим о плановой работе СХД. Как часто вы перезаписываете полностью базу данных? Это уже скорее не характерная нагрузка на СХД. О ней не стоит говорить в рамках данного кейса.
источник

NL

Nikolay Lysikov in Storage Discussions
Михаил
Всем привет. Может кто то поделится практическим опытом (наблюдениями) в ответе на вопрос: SSD в режиме raid-0 (данные можно потерять): какой максимальный процент заполнения накопителя возможен без снижения производительности write-операций (.../70/80/...%)? Диски RI.
85% в пуле без дедупов и компрессии. Raid 5.
источник

M

Mikhail in Storage Discussions
Михаил
Всем привет. Может кто то поделится практическим опытом (наблюдениями) в ответе на вопрос: SSD в режиме raid-0 (данные можно потерять): какой максимальный процент заполнения накопителя возможен без снижения производительности write-операций (.../70/80/...%)? Диски RI.
Серверные должны выдавать паспортные характеристики при наихудшем сценарии: https://youtu.be/AXjclFOyB_U?t=11089
источник

A

Alexandr in Storage Discussions
Максим Ганин
Очень слабо верится в такой кейс что я в 0:01 буду удалять петабайты данных и в эту же минуту их загружать.
Нереален ваш кейс.

Ну и вообще мы говорим о плановой работе СХД. Как часто вы перезаписываете полностью базу данных? Это уже скорее не характерная нагрузка на СХД. О ней не стоит говорить в рамках данного кейса.
Был такой кейс точнее два, у заказчика крупная интернет платформа где данные постоянно зачищяються и загружаются не петабайты но что то около ~300 400тб, второй кейс был база данных полностью мигрировала с схд раз в два дня с зачищением за собой и полная загрузка объем был около ~250тб
источник

YA

Yan Aleksandrovskiy in Storage Discussions
Максим Ганин
Очень слабо верится в такой кейс что я в 0:01 буду удалять петабайты данных и в эту же минуту их загружать.
Нереален ваш кейс.

Ну и вообще мы говорим о плановой работе СХД. Как часто вы перезаписываете полностью базу данных? Это уже скорее не характерная нагрузка на СХД. О ней не стоит говорить в рамках данного кейса.
ребилд индексов
восстановление из бэкап.

Мало ли сценариев можно придумать. Хотя конечно не на всю СХД... обычно.
источник

SO

Sergey Osipov in Storage Discussions
Yan Aleksandrovskiy
ребилд индексов
восстановление из бэкап.

Мало ли сценариев можно придумать. Хотя конечно не на всю СХД... обычно.
у нас был молодой виндовз админ, который просто запустил дефрашментацию на всех дисках всех виндовых серваков. Естесственно большая часть из них были луны с нетаппов
источник

A

Alexandr in Storage Discussions
Yan Aleksandrovskiy
ребилд индексов
восстановление из бэкап.

Мало ли сценариев можно придумать. Хотя конечно не на всю СХД... обычно.
А и не надо на всю ему 30 40% достаточно от схд что бы запустить внутренние сервисы для дедупа и компрессии и загрузить так не хило схд
источник

A

Alexandr in Storage Discussions
Nikolay Lysikov
85% в пуле без дедупов и компрессии. Raid 5.
По идеи падение производительности не должно быть если только это не какие то доп сервисы файл системы или еще какие либо фишки в виде шифрования или индексация дополнительная при достижении порога загруски
источник

A

Alexandr in Storage Discussions
У вас база данных ? Или видео поток или файл помойка ?
источник

A

Arthur in Storage Discussions
Берутся конкретные диски и тестируются. Все остальное какие-то бессмысленные домыслы.
источник

PP

P P in Storage Discussions
Sergey Osipov
у нас был молодой виндовз админ, который просто запустил дефрашментацию на всех дисках всех виндовых серваков. Естесственно большая часть из них были луны с нетаппов
Даже интересно стало, а какой был результат?
источник

AL

Andrey Luchnoy in Storage Discussions
P P
Даже интересно стало, а какой был результат?
Был админ и нет админа
источник

PP

P P in Storage Discussions
Andrey Luchnoy
Был админ и нет админа
Речь не об оргвыводах, это малоинтересно.
источник

i

iscsi in Storage Discussions
и вопрос вовсе не к админу, а к тому, кто отвечает за интеграцию админов с теми, кто эксплуатирует СХД
источник

SO

Sergey Osipov in Storage Discussions
P P
Даже интересно стало, а какой был результат?
ну места занятого резко так стало в два раза больше всего-лишь
источник

NL

Nikolay Lysikov in Storage Discussions
Alexandr
По идеи падение производительности не должно быть если только это не какие то доп сервисы файл системы или еще какие либо фишки в виде шифрования или индексация дополнительная при достижении порога загруски
разные бд с профилем примерно 90/10, dwpd ~1, при достижении заполнения 85-87% скачкообразный рост задержек, лечится эвакуацией лунов, причём комфортные задержки возвращаются в процессе миграции при обратном прохождении порога.
источник

NL

Nikolay Lysikov in Storage Discussions
похоже на сбор мусора
источник