DM
Hey hey - some self promo here: I will be live on stream today with the folks from commited.tech ! We will be talking AWS, DevOps and Conferences - make sure to check it out today at 19h GMT+2 : https://commited.tech/
Size: a a a
2020 December 10
KZ
Hey hey - some self promo here: I will be live on stream today with the folks from commited.tech ! We will be talking AWS, DevOps and Conferences - make sure to check it out today at 19h GMT+2 : https://commited.tech/
Nice, thanks for sharing the link 👍
AP
А вот и записи обсуждения новинок на Twich канале
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
A
А вот и записи обсуждения новинок на Twich канале
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
Спасибо
VP
AWS посиделки (2)
Тема: FSx for Lustre Dive Deep
Когда: Понедельник 21 декабря 17:00-18:00 MSK
Где: https://chime.aws/1448024238
Meeting ID: 1448 02 4238
Как присоединиться: Download Amazon Chime at https://aws.amazon.com/chime/download
Тема: FSx for Lustre Dive Deep
Когда: Понедельник 21 декабря 17:00-18:00 MSK
Где: https://chime.aws/1448024238
Meeting ID: 1448 02 4238
Как присоединиться: Download Amazon Chime at https://aws.amazon.com/chime/download
KT
AWS посиделки (2)
Тема: FSx for Lustre Dive Deep
Когда: Понедельник 21 декабря 17:00-18:00 MSK
Где: https://chime.aws/1448024238
Meeting ID: 1448 02 4238
Как присоединиться: Download Amazon Chime at https://aws.amazon.com/chime/download
Тема: FSx for Lustre Dive Deep
Когда: Понедельник 21 декабря 17:00-18:00 MSK
Где: https://chime.aws/1448024238
Meeting ID: 1448 02 4238
Как присоединиться: Download Amazon Chime at https://aws.amazon.com/chime/download
Q
А вот и записи обсуждения новинок на Twich канале
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
https://www.youtube.com/channel/UCPbOQ7MCkVzSW8cKa7DZ_bw
🤘
2020 December 11
ss
Салем брат
AP
Amazon EMR - отличный севис для запуска приложений для анализа больших объемов данных на таких фреймворках, как Apache Spark, Hive, HBase, Flink, Hudi и Presto.
В настоящее время заказчики консолидируют вычислительные ресурсы, используя Kubernetes.
Тут должна быть какая то связь!!! Рад представить вам новую статью от AWS RU команды о новой возможности запускать Amazon EMR на Amazon EKS.
https://aws.amazon.com/ru/blogs/rus/new-amazon-emr-on-amazon-elastic-kubernetes-service-eks/
В настоящее время заказчики консолидируют вычислительные ресурсы, используя Kubernetes.
Тут должна быть какая то связь!!! Рад представить вам новую статью от AWS RU команды о новой возможности запускать Amazon EMR на Amazon EKS.
https://aws.amazon.com/ru/blogs/rus/new-amazon-emr-on-amazon-elastic-kubernetes-service-eks/
AS
Amazon EMR - отличный севис для запуска приложений для анализа больших объемов данных на таких фреймворках, как Apache Spark, Hive, HBase, Flink, Hudi и Presto.
В настоящее время заказчики консолидируют вычислительные ресурсы, используя Kubernetes.
Тут должна быть какая то связь!!! Рад представить вам новую статью от AWS RU команды о новой возможности запускать Amazon EMR на Amazon EKS.
https://aws.amazon.com/ru/blogs/rus/new-amazon-emr-on-amazon-elastic-kubernetes-service-eks/
В настоящее время заказчики консолидируют вычислительные ресурсы, используя Kubernetes.
Тут должна быть какая то связь!!! Рад представить вам новую статью от AWS RU команды о новой возможности запускать Amazon EMR на Amazon EKS.
https://aws.amazon.com/ru/blogs/rus/new-amazon-emr-on-amazon-elastic-kubernetes-service-eks/
Отлично, очень актуально, почитаю!)
D
LB
В AWS CDK необходимо бутстрапить аккаунты, чтобы в них можно было деплоить. Бутстрап происходит через маленький CF stack, который создаёт роли, S3 бакет и ECR. К сожалению этот стэк нельзя разлить по организации через StackSet, т.к. в коде CDK есть привязка к его имени, а StackSet создает в каждом аккаунте стэк с уникальным именем.
Запилил патч и даже проверил на себе - работает. Делюсь, если кому-то еще нужно: https://github.com/aws/aws-cdk/pull/11952
Запилил патч и даже проверил на себе - работает. Делюсь, если кому-то еще нужно: https://github.com/aws/aws-cdk/pull/11952
GB
Всем привет!
Крайне нубский вопрос: есть сервисы в ECS (Fargate Spot), они в приватном сабнете. Не получалось спуллить образы из ECR, поэтому я добавил для них NAT Gateway.
Сервисы – воркеры для Airflow (что-то выгрузить от внешнего API, преобразовать, положить в S3 и т.д.). Косты на NAT Gateway меня не радуют.
Какие могут быть альтернативы, или что я мог упустить в настройках?
Крайне нубский вопрос: есть сервисы в ECS (Fargate Spot), они в приватном сабнете. Не получалось спуллить образы из ECR, поэтому я добавил для них NAT Gateway.
Сервисы – воркеры для Airflow (что-то выгрузить от внешнего API, преобразовать, положить в S3 и т.д.). Косты на NAT Gateway меня не радуют.
Какие могут быть альтернативы, или что я мог упустить в настройках?
LB
Всем привет!
Крайне нубский вопрос: есть сервисы в ECS (Fargate Spot), они в приватном сабнете. Не получалось спуллить образы из ECR, поэтому я добавил для них NAT Gateway.
Сервисы – воркеры для Airflow (что-то выгрузить от внешнего API, преобразовать, положить в S3 и т.д.). Косты на NAT Gateway меня не радуют.
Какие могут быть альтернативы, или что я мог упустить в настройках?
Крайне нубский вопрос: есть сервисы в ECS (Fargate Spot), они в приватном сабнете. Не получалось спуллить образы из ECR, поэтому я добавил для них NAT Gateway.
Сервисы – воркеры для Airflow (что-то выгрузить от внешнего API, преобразовать, положить в S3 и т.д.). Косты на NAT Gateway меня не радуют.
Какие могут быть альтернативы, или что я мог упустить в настройках?
public subnet + security group, что б не стучались извне
II
Мы начали новый стрим, говорим про контейнеры и сеть
https://www.twitch.tv/awsporusski
https://www.twitch.tv/awsporusski
S
Салем брат
:)
GB
public subnet + security group, что б не стучались извне
И правда логично)
Спасибо!
Спасибо!
LB
И правда логично)
Спасибо!
Спасибо!
еще можно https://docs.aws.amazon.com/AmazonECR/latest/userguide/vpc-endpoints.html , но это больше заморочек