DL
это другая история, насколько я понял. Там были реальные 1,5Gb вроде
Size: a a a
2021 March 09
DS
Dmitry Lukovkin
это другая история, насколько я понял. Там были реальные 1,5Gb вроде
я может неправильно понял - у вас сейчас общая проблема, или просто совпадение в чате?
MA
От 1 до сотен раз в сек. В зависимости от ситуации. На самом деле большая часть запросов до 50к. Но там таплы оч маленькие
плевать какого размера таплы. сам тапл на арене
память они загаживают одинаково
память они загаживают одинаково
Е
я может неправильно понял - у вас сейчас общая проблема, или просто совпадение в чате?
у нас разные подсистемы в которых при увеличении нагрузки появились схожие проблемы
Е
Странная реакция
DL
я может неправильно понял - у вас сейчас общая проблема, или просто совпадение в чате?
Нет, не совпадение, но 1,5Gb это было про другое, там нашли корень зла. Теперь вот с селектами мучаемся.
Вопрос в догонку установка tarantool/metrics возможна только через rocks?
Вопрос в догонку установка tarantool/metrics возможна только через rocks?
MA
Странная реакция
Мне кажется, что вы игнорируете чужой опыт
Е
Мне кажется, что вы игнорируете чужой опыт
нет, что делать понятно. Идея была по быстрому подтюнить tnt и выиграть время. В любом случае спасибо, больше стало понятно
MA
внутри каждого возврата большого сета воткнуть
это очень плохой совет, который сожрёт кучу CPU на gc, но позволит удержать память
fiber.new(function() collectgarbage('collect') end) return big_data_setэто очень плохой совет, который сожрёт кучу CPU на gc, но позволит удержать память
Е
внутри каждого возврата большого сета воткнуть
это очень плохой совет, который сожрёт кучу CPU на gc, но позволит удержать память
fiber.new(function() collectgarbage('collect') end) return big_data_setэто очень плохой совет, который сожрёт кучу CPU на gc, но позволит удержать память
есть понимание когда и в какой версии вы снимете ограничение на 2Гб lua?
MA
вообще не приоритет. не стоит на это рассчитывать
MA
запрашивать 200к через SQL настолько же плохая идея. независимо от SQL/Lua и GC
NK
получается как альтернатива - стоит переезжать на 2.х и запрашивать через SQL. Я верно понимаю там нет в прокладке lua?
вы не могли бы описать, зачем вам единомоментно выгружать 200к записей? В этой же задаче у вас 28 мастеров? У вас задача сбора метрик с устройств?
Е
вы не могли бы описать, зачем вам единомоментно выгружать 200к записей? В этой же задаче у вас 28 мастеров? У вас задача сбора метрик с устройств?
нет. Мы занимаемся разработкой систем автоматизации для валютных рынков
NK
ну тогда стало слегка понятнее. Типовая торговая биржа генерирует несколько сотен тысяч ордеров в секунду.
Е
ну тогда стало слегка понятнее. Типовая торговая биржа генерирует несколько сотен тысяч ордеров в секунду.
больше и дело тут не в ордерах а в целом о событиях
NK
любопытно