Size: a a a

DevOps Jobs - работа и аналитика

2020 June 21

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Dmitry Titov
Я на одном сервере постгри так выжимал 100к транзакций в секунду
😐да выжимать можно и 200, вопрос какого объёма потом выдачи
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
у меня был сервак пг с E3-1230 v6 128 рам и  5 nvme, я в него хреначил 60к запросов в сек и ещё около 100к было дубликаты
источник

АБ

Андрей Балашов... in DevOps Jobs - работа и аналитика
Старый Хрыч
клик  это счётчики и метрики
клик хорошо кучу всяких разных данных хранит. У нас для логов используется)
источник

DT

Dmitry Titov in DevOps Jobs - работа и аналитика
Старый Хрыч
у меня был сервак пг с E3-1230 v6 128 рам и  5 nvme, я в него хреначил 60к запросов в сек и ещё около 100к было дубликаты
вот, да примерно +- такой же кейс.
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Андрей Балашов
клик хорошо кучу всяких разных данных хранит. У нас для логов используется)
сделай потом олап куб по логам на 10-15 млрд записей
источник

АБ

Андрей Балашов... in DevOps Jobs - работа и аналитика
Старый Хрыч
у меня был сервак пг с E3-1230 v6 128 рам и  5 nvme, я в него хреначил 60к запросов в сек и ещё около 100к было дубликаты
на запись или чтение?
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Андрей Балашов
на запись или чтение?
запись, и 60к в чтений
источник

АБ

Андрей Балашов... in DevOps Jobs - работа и аналитика
очень неплохо
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Андрей Балашов
очень неплохо
😅если бы ты знал сколько мне пришлось мозг сношать кодерам и сидеть с ними  смотреть explain....
источник

DT

Dmitry Titov in DevOps Jobs - работа и аналитика
Старый Хрыч
😅если бы ты знал сколько мне пришлось мозг сношать кодерам и сидеть с ними  смотреть explain....
Сам бы поправил и не мучал бы бедных кодеров
источник

АБ

Андрей Балашов... in DevOps Jobs - работа и аналитика
ну так постгрю еще подтюнить нужно уметь. А таки да, от кодеров многое зависит.
источник

АБ

Андрей Балашов... in DevOps Jobs - работа и аналитика
Dmitry Titov
Сам бы поправил и не мучал бы бедных кодеров
такие уж они бедные. ага
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Андрей Балашов
ну так постгрю еще подтюнить нужно уметь. А таки да, от кодеров многое зависит.
от тебя меньше 10% зависит, а 90% это код и план запроса
источник

DT

Dmitry Titov in DevOps Jobs - работа и аналитика
Старый Хрыч
от тебя меньше 10% зависит, а 90% это код и план запроса
ну еще есть async_commit)
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Dmitry Titov
ну еще есть async_commit)
ну сделай, а потом пускай тебе дубликатов сделают больше  чем реальных записей....
источник

DT

Dmitry Titov in DevOps Jobs - работа и аналитика
Старый Хрыч
ну сделай, а потом пускай тебе дубликатов сделают больше  чем реальных записей....
Каким образом?
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
Dmitry Titov
Каким образом?
а таким, воркеры собирают данные, данные могут пересекаться
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
воркеров 3500
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
😁почти весь лог пг из сообщений о дубликатах, кайф
источник

СХ

Старый Хрыч... in DevOps Jobs - работа и аналитика
но, если делать проверку перед записью,  резко растёт iowait и база и 30к не делает
источник