коллеги, а можно ли как-то докопаться до логов SES, особенно интересуют отлупы по превышению rate limit и т.п.  события,  когда почта не отправилась, ругнувшись клиенту

Можно. С помощью SES Configuration sets

спасибо

А подскажите, пожалуйста,  по созданию топика в кафке. Я вот терраформом в амазоне создаю кластер кафка, и хотел бы создать в нём топики, но модуль терраформовский не даёт такой возможности. Я пробую сторонним модулем создать, но эндпойнт брокера же во внутренней сети получается, и само собой модуль достучаться до него не может. Как вообще нормальные люди в жизни обычной это делают? А то я раньше не особо с кафкой амазоновской сталкивался - там вроде есть опция автосоздания топиков, может поэтому можно и вообще без принудительного создания топика обойтись?

kafka это просто инстанс в кластере приложения в кластере, поэтому у нее свой tcp/rest api
терраформ по-идее умеет только вызывать aws api

автосоздание топиков не всегда хорошо, потому что иногда нужно жестко контроллировать количество и названия топиков.

То есть получается, что софт сам должен обращаться к апи кафки для создания топиков?

обычно да
возможно конечно и придумали какой-то хук для терраформа, но это типо создания таблицы в rds
используется

provisioner "local-exec" {
 command = “”
}

Есть какой-то провайдер для кафки - https://registry.terraform.io/providers/Mongey/kafka/latest/docs

Для этого само собой должен быть доступ к брокерам с той машины, откуда вы применяете терраформ.

теоретически это то, что нужно

Да, в этом-то и проблема. Получается, что терраформ нужно запускать в той же подсети, что и кластер, иначе не достучаться. А делать кластер с доступом к нему из интернета не стОит, как мне кажется )

vpn?

Можно и впн, и бастион хост поднять и с него делать, но мне просто надо было понять, что придётся именно так делать как-то.

Спасибо за информацию всем, стало яснее.

проще говоря, через aws api такого нет, а все остальное это танцы вокруг инстанса

Ага, спасибо.

в гитлабе поднимаешь раннер крутящийся внутри прайват сети и права ему навешиваешь, если тачка - через IAM profile, если под - через irsa

а вообще создание топика логичнее через приложение делать. Ибо там лучше понимается что за топик, сколько партишенов ему дать и тп

Кто-нибудь сталкивался с ошибкой вида
PostTrafficHook AWS::Lambda::Function CREATE_FAILED You have exceeded the maximum limit for HyperPlane ENIs for your account.
на создании лямбды, которая прицеплена к vpc, который расшарен с парой десятков аккаунтов?)
Как смотрите текущее потребление?