Size: a a a

2020 December 06

S🕶

Sander 🕶 in AWS_RU
SQS как-то очень медленно работает, одно сообщение sqs отправил и занимает его обработка минуты 3, это очень медленно,
есть ли какой-то более быстрый способ обмениваться сообщениями между программами на уровне lambda.
источник

VM

Viktor Mazankin in AWS_RU
Sander 🕶
SQS как-то очень медленно работает, одно сообщение sqs отправил и занимает его обработка минуты 3, это очень медленно,
есть ли какой-то более быстрый способ обмениваться сообщениями между программами на уровне lambda.
Что-то не так делаете, обычно в sqs несколько сот миллисекунд сообщение бродит
источник

DK

D K in AWS_RU
Sander 🕶
SQS как-то очень медленно работает, одно сообщение sqs отправил и занимает его обработка минуты 3, это очень медленно,
есть ли какой-то более быстрый способ обмениваться сообщениями между программами на уровне lambda.
amazon mq, но тебе верно говорят 3 минуты - очень много
источник

S🕶

Sander 🕶 in AWS_RU
Понятно, интересно что я не так делаю
источник

S🕶

Sander 🕶 in AWS_RU
D K
amazon mq, но тебе верно говорят 3 минуты - очень много
Не слышал про Amazon mq, хмм... мне надо что попроще и не сильно медленное, задержка в 1-3 сек допустимо, там все на лямбдах и нагрузки нет никакой, но если оно там секунд 30 в ожидании, то это много, мне надо сразу отправил сообщение и lambda сразу получило это сообщение, и считаю всегда одно сообщение, а не несколько.
источник

АП

Агент Печенька... in AWS_RU
sqs ровно так и работает, ищи у себя в конфигурации проблему.
источник

VM

Viktor Mazankin in AWS_RU
Sander 🕶
SQS как-то очень медленно работает, одно сообщение sqs отправил и занимает его обработка минуты 3, это очень медленно,
есть ли какой-то более быстрый способ обмениваться сообщениями между программами на уровне lambda.
mq, kinesis, msk/kafka, eventbridge, rabbit
источник

S🕶

Sander 🕶 in AWS_RU
может будет подсказка, как отправить одно сообщение, чтоб оно сразу дошло до консюмера.
источник

S🕶

Sander 🕶 in AWS_RU
Viktor Mazankin
mq, kinesis, msk/kafka, eventbridge, rabbit
Я думаю не все работает с lambda
источник

VM

Viktor Mazankin in AWS_RU
Sander 🕶
Я думаю не все работает с lambda
первые 4 точно работают, последняя должна, но не проверял
источник

S🕶

Sander 🕶 in AWS_RU
окей, а что самое удобное для работы с lambda? Когда между lambda надо обмениваться информацией, я думал sns + sqs использовать.
источник

AD

Aliaksandr Dounar in AWS_RU
Что есть обмен информации? Синхронно? Из одной в другую?
источник

S🕶

Sander 🕶 in AWS_RU
Хоть синхронно, но на скок знаю там все работает асинхронно
источник

S🕶

Sander 🕶 in AWS_RU
Кейс простой, сохранил информацию в базу и создаются например 3-10 сообщений, которые запускают уже свои процессы, я думал sns+sqs, но если есть лушче предложение и не сложное
источник

АП

Агент Печенька... in AWS_RU
sqs+sns вполне норм, и не сложно.
источник

S🕶

Sander 🕶 in AWS_RU
я с другими просто вообще не работал, sns и sqs тоже первый раз пробую
источник

S🕶

Sander 🕶 in AWS_RU
Kafka только на спринга в докерах
источник

ФТ

Федя Тагил in AWS_RU
Привет
У нас сейчас встала задача делать всякие выборки из логов хранящихся в CloudWatch Logs, в сутки натекает 40 Гб логов, нужно их хранить за 3 месяца, тобишь 3,6 Тб в сумме.
В идеале надо сделать, чтобы работать с логами на языке запросов SQL.
Сейчас несколько вариантов на рассмотрении
1) Aurora PostgreSQL с партициями по неделям
2) AWS Kinesis
По 2 варианта сложно спрогнозировать конечную стоимость
Может ещё какие-то сервисы (связки сервисов) посоветуете?
Данные мы должны успевать отдавать за 300мс максимум
источник

S

Salem in AWS_RU
Elastic? Insight?
источник

ФТ

Федя Тагил in AWS_RU
Salem
Elastic? Insight?
А по деньгам это будет выгоднее всего?
источник