Телеграмм чат группы itarchitect страница 3468

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Архитектура ИТ-решений

2755 membersпожаловаться на группу

2020 November 25

PD

Phil Delgyado in Архитектура ИТ-решений

Странный вопрос. Там же написано про dax и mmap. Идея в том, чтобы выкинуть page cache и block layer из i/o path.

Я про другое - кто из БД умеет использовать эти вещи?
Т.е. если будет СУБД, оптимизированная под NPM - то прекрасно. Но пока еще таких нет.

источник

12:38пожаловаться #1

N

Nikolay in Архитектура ИТ-решений

Ну, банковские системы даже 1K Payment-per-second тянут очень с трудом, а 10K - просто никак.
Ну и описание сложных платежей через конечный автомат - очень сложное и очень тяжело меняемое. Ну и с взаимодействием с пользователем там все грустно.
Я то как раз про платежи и говорю в основном, но не только про банк, а про произвольную платежку

все известные мне банковские системы работют или работали по этому принципу. Например почти все Форс, почти все Диасофт. 1K в секунду для банковсих систем это 86 400 000 платежей в день. в каком банке такое количество? Насколько я помню у визы всего 1.7К в секунду. Столько конечно на одном хосте трудно сделать т.к там трнзакции сами по себе занимают много времени без учета время на ожидания коммита

источник

12:39пожаловаться #2

D

Danil in Архитектура ИТ-решений

Я про другое - кто из БД умеет использовать эти вещи?
Т.е. если будет СУБД, оптимизированная под NPM - то прекрасно. Но пока еще таких нет.

А им обязательно это уметь? Я вчера пока читал про NVDIMM, нашел статью майкрософта, который обещает большой прирост перформанса для MSSQL в случае перемещения transaction log на NVDIMM virtual storage

источник

12:40пожаловаться #3

PD

Phil Delgyado in Архитектура ИТ-решений

Nikolay

все известные мне банковские системы работют или работали по этому принципу. Например почти все Форс, почти все Диасофт. 1K в секунду для банковсих систем это 86 400 000 платежей в день. в каком банке такое количество? Насколько я помню у визы всего 1.7К в секунду. Столько конечно на одном хосте трудно сделать т.к там трнзакции сами по себе занимают много времени без учета время на ожидания коммита

Ну, 1K в секунду в пике - это легко для средней платежке.
В черную пятницу 10K в пике для каких-нибудь Яндекс.Денег - реально.
У визы несколько лет назад зафиксировано 40K в секунду, про актуальные данные - не знаю. Но совсем не 1.7K
Ну и я не для нашего рынка работаю.

источник

12:41пожаловаться #4

N

Nikolay in Архитектура ИТ-решений

Ну, реально, конечно, число соединений нужно как число воркеров, а их много не нужно, но зависит от транзакционности обработки сообщения и вообще времени обработки сообщения. На 10K воркеров и 10ms получим 1mln MPS

база не понятет 10Л соединений активных, каждое из которых будет держать лок. Ну или я не так вас понял.

источник

12:41пожаловаться #5

p

pragus in Архитектура ИТ-решений

Я про другое - кто из БД умеет использовать эти вещи?
Т.е. если будет СУБД, оптимизированная под NPM - то прекрасно. Но пока еще таких нет.

А им особо не надо уметь, особенно если речь mmap.

источник

12:42пожаловаться #6

PD

Phil Delgyado in Архитектура ИТ-решений

Nikolay

база не понятет 10Л соединений активных, каждое из которых будет держать лок. Ну или я не так вас понял.

Хм, там же около сотни на ядро было на PG еще в девятке, а Oracle может быть и больше, насколько я помню.
100 ядер - уже не проблема )

источник

12:43пожаловаться #7

PD

Phil Delgyado in Архитектура ИТ-решений

А им особо не надо уметь, особенно если речь mmap.

Хм. Увы, им нужно всю свою логику оптимизировать под такие задачи. А большинство рассчитано на шпиндельные диски, увы.
Как минимум при планировании запросов и работе с локами (да и дофига прочего).

источник

12:44пожаловаться #8

N

Nikolay in Архитектура ИТ-решений

Хм, там же около сотни на ядро было на PG еще в девятке, а Oracle может быть и больше, насколько я помню.
100 ядер - уже не проблема )

это сказки, что 10К активных сессий оракле потянет. он может понянуть и 30К, но только если они будут неактивные.

источник

12:44пожаловаться #9

p

pragus in Архитектура ИТ-решений

https://www.percona.com/blog/2019/02/25/mysql-challenge-100k-connections/

Percona Database Performance Blog

MySQL Challenge: 100k Connections - Percona Database Performance Blog

It's not beyond possibility to set up MySQL to achieve 100,000 concurrent connections if you balance network config and use thread pools. By Vadim Tkachenko

источник

12:44пожаловаться #10

PD

Phil Delgyado in Архитектура ИТ-решений

Nikolay

это сказки, что 10К активных сессий оракле потянет. он может понянуть и 30К, но только если они будут неактивные.

Ок, не видел тестов, так что может и сказки. Могу спросить у наших DBA, сколько они на кластерах выжимали.

источник

12:45пожаловаться #11

PD

Phil Delgyado in Архитектура ИТ-решений

https://www.percona.com/blog/2019/02/25/mysql-challenge-100k-connections/

Percona Database Performance Blog

MySQL Challenge: 100k Connections - Percona Database Performance Blog

It's not beyond possibility to set up MySQL to achieve 100,000 concurrent connections if you balance network config and use thread pools. By Vadim Tkachenko

Не надо читать про performance у производителя, там данные обычно не связаны с реальностью

источник

12:45пожаловаться #12

N

Nikolay in Архитектура ИТ-решений

вы только уточните, что они должны быть в статусе ACTIVE, когда будете спрашивать у DBA.

источник

12:46пожаловаться #13

N

Nikolay in Архитектура ИТ-решений

https://www.percona.com/blog/2019/02/25/mysql-challenge-100k-connections/

Percona Database Performance Blog

MySQL Challenge: 100k Connections - Percona Database Performance Blog

It's not beyond possibility to set up MySQL to achieve 100,000 concurrent connections if you balance network config and use thread pools. By Vadim Tkachenko

А тут разве активные коннекшены? на том же оракле можно создать тоже 100К, которые просто будет висеть в системе и ничего не делать.

источник

12:47пожаловаться #14

PD

Phil Delgyado in Архитектура ИТ-решений

https://www.percona.com/blog/2019/02/25/mysql-challenge-100k-connections/

Percona Database Performance Blog

MySQL Challenge: 100k Connections - Percona Database Performance Blog

It's not beyond possibility to set up MySQL to achieve 100,000 concurrent connections if you balance network config and use thread pools. By Vadim Tkachenko

Там пишут про query, а не про transactions. Разница большая

источник

12:47пожаловаться #15

PD

Phil Delgyado in Архитектура ИТ-решений

Что там sysbench реально делает? Я не в курсе.

источник

12:49пожаловаться #16

p

pragus in Архитектура ИТ-решений

Не надо читать про performance у производителя, там данные обычно не связаны с реальностью

ну они не производители, а скорее консалтинг. у них есть и свои варианты mongodb/mysql, но их бенчам вполне можно верить.
вот про pg: https://www.percona.com/blog/2020/07/28/evaluating-checkpointing-in-postgresql/

Percona Database Performance Blog

Evaluating Checkpointing in PostgreSQL - Percona Database Performance Blog

Percona's Vadim Tkachenko evaluates checkpointing in PostgreSQL with varying log sizes from 1GB to 100GB.

источник

12:50пожаловаться #17

PD

Phil Delgyado in Архитектура ИТ-решений

Percona - производитель как раз )

источник

12:51пожаловаться #18

PD

Phil Delgyado in Архитектура ИТ-решений

Там же как раз про плагин перконы для thread pool )

источник

12:55пожаловаться #19

p

pragus in Архитектура ИТ-решений

Там пишут про query, а не про transactions. Разница большая

https://github.com/Percona-Lab/sysbench-tpcc/blob/master/tpcc_run.lua#L80

Percona-Lab/sysbench-tpcc

Sysbench scripts to generate a tpcc-like workload for MySQL and PostgreSQL - Percona-Lab/sysbench-tpcc

источник

12:55пожаловаться #20