Телеграмм чат группы aws_ru страница 2899

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

AWS_RU

1586 membersпожаловаться на группу

2020 June 21

AV

Alexander Valkov in AWS_RU

В вопросе не был обозначен tier

В вопросе была обозначена конкретная формулировка.
Понятно, что если её где-то нет, то речь не о том. Речь о том, где она есть и применяется.

источник

18:19пожаловаться #1

AV

Alexander Valkov in AWS_RU

Alexander Valkov

В таблице в консоли, например. Retrieval для IA

А здесь вообще "Retrieval для IA"

источник

18:19пожаловаться #2

РР

Роман Рахманин... in AWS_RU

Alexander Valkov

Я тоже так думаю, хотел уточнить, может кто знает наверняка

Я на форуме встречал от инженера сообщение про округление, вот тоже задумался

источник

18:41пожаловаться #3

2020 June 22

D

Denis 災 nobody in AWS_RU

есть у кого код, чтобы удалить сервер из AD когда он terminate?

источник

07:29пожаловаться #4

T

Tutlique in AWS_RU

Denis 災 nobody

есть у кого код, чтобы удалить сервер из AD когда он terminate?

В смысле?

источник

09:41пожаловаться #5

AS

Alexey Stekov in AWS_RU

Переслано от Aleksey

Довольно богатая на детали статья по CI/CD от Amazon https://aws.amazon.com/builders-library/automating-safe-hands-off-deployments/

Amazon Web Services, Inc.

Automating safe, hands-off deployments

Strategies for continuously deploying to production while balancing safety and speed.

источник

10:11пожаловаться #6

D

Denis 災 nobody in AWS_RU

В смысле?

При добавлении сервера мы делаем realm join, а как его удалять при terminate? Лучше в виде лямбды

источник

10:45пожаловаться #7

A

Aleksandr in AWS_RU

Всем привет. Есть лямбда в амазоне, которая читает паркет файл с помощью aws wrangler и выводит о нем информацию. Паркет файл не очень большой ~ 30мб. Код примерно следующий:

dfs = wr.s3.read_parquet("s3://bucket/key.parquet")
    for df in dfs:
        df.info()

При этом лямбда не укладывается в свои максимальные 3гб. Как такое может быть? 30мб паркет раздувается до размеров, превышающих 3гб? При этом пробовал делить датасет на чанки - варьировал опцию chunked, но все безуспешно. Что при chunked = 100, что при 1000000 - лямбда не укладывается в свои 3гб. Что можно сделать в данном случае и как понять природу проблемы?

источник

11:04пожаловаться #8

AZ

Andrey Z in AWS_RU

смотрю в https://aws-data-wrangler.readthedocs.io/en/latest/stubs/awswrangler.s3.read_parquet.html
вижу
Note
Batching (chunked argument) (Memory Friendly):
Will anable the function to return a Iterable of DataFrames instead of a regular DataFrame.
There are two batching strategies on Wrangler:
If chunked=True, a new DataFrame will be returned for each file in your path/dataset.
If chunked=INTEGER, Wrangler will iterate on the data by number of rows igual the received INTEGER.
P.S. chunked=True if faster and uses less memory while chunked=INTEGER is more precise in number of rows for each Dataframe.

источник

11:08пожаловаться #9

A

Aleksey in AWS_RU

Denis 災 nobody

есть у кого код, чтобы удалить сервер из AD когда он terminate?

вроде того? https://aws.amazon.com/blogs/infrastructure-and-automation/run-code-before-terminating-an-ec2-auto-scaling-instance/

Amazon Web Services

Run code before terminating an EC2 Auto Scaling instance | Amazon Web Services

Learn how to create an AWS CloudFormation template that runs code prior to terminating an EC2 Auto Scaling instance.

источник

11:09пожаловаться #10

A

Aleksandr in AWS_RU

смотрю в https://aws-data-wrangler.readthedocs.io/en/latest/stubs/awswrangler.s3.read_parquet.html
вижу
Note
Batching (chunked argument) (Memory Friendly):
Will anable the function to return a Iterable of DataFrames instead of a regular DataFrame.
There are two batching strategies on Wrangler:
If chunked=True, a new DataFrame will be returned for each file in your path/dataset.
If chunked=INTEGER, Wrangler will iterate on the data by number of rows igual the received INTEGER.
P.S. chunked=True if faster and uses less memory while chunked=INTEGER is more precise in number of rows for each Dataframe.

Да. В моем случае, если у меня один паркет файл, то не имеет смысла ставить опцию в True, насколько я понял. Поэтому делал с integer

источник

11:17пожаловаться #11

LK

всем привет, клиенту скинул Key-pair ( PEM file )

-----BEGIN CERTIFICATE-----
.... key 
-----END CERTIFICATE-----

пытаюсь подключиться через ssh
ssh -v -i ~/.ssh/private.pem user@host.com

получаю лог

debug1: Will attempt key: /home/user/.ssh/private.pem  explicit
debug1: SSH2_MSG_SERVICE_ACCEPT received
debug1: Authentications that can continue: publickey
debug1: Next authentication method: publickey
debug1: Trying private key: /home/user/.ssh/private.pem
Load key "/home/user/.ssh/private.pem": invalid format
debug1: No more authentication methods to try.
user@host.com: Permission denied (publickey).

Private key который скинул мне клиент есть y Key pair, и приаттачен к тому серверу к которому я подключаюсь

источник

12:30пожаловаться #12

N

Nikolai in AWS_RU

всем привет, клиенту скинул Key-pair ( PEM file )

-----BEGIN CERTIFICATE-----
.... key 
-----END CERTIFICATE-----

пытаюсь подключиться через ssh
ssh -v -i ~/.ssh/private.pem user@host.com

получаю лог

debug1: Will attempt key: /home/user/.ssh/private.pem  explicit
debug1: SSH2_MSG_SERVICE_ACCEPT received
debug1: Authentications that can continue: publickey
debug1: Next authentication method: publickey
debug1: Trying private key: /home/user/.ssh/private.pem
Load key "/home/user/.ssh/private.pem": invalid format
debug1: No more authentication methods to try.
user@host.com: Permission denied (publickey).

Private key который скинул мне клиент есть y Key pair, и приаттачен к тому серверу к которому я подключаюсь

во-первых, Амазон тут не причем
во-вторых, Load key "/home/user/.ssh/private.pem": invalid format

источник

12:36пожаловаться #13

LK

во-первых, Амазон тут не причем
во-вторых, Load key "/home/user/.ssh/private.pem": invalid format

понял, эту ошибку гуглил
значит проблема не на моей стороне ?

источник

12:37пожаловаться #14

GS

Gordon Shumway in AWS_RU

-----BEGIN RSA PRIVATE KEY-----
key
-----END RSA PRIVATE KEY-----
aws в таком втде приватный ключ даёт

источник

12:37пожаловаться #15

GS

Gordon Shumway in AWS_RU

а если генерили сами, то проверьте ключи

источник

12:38пожаловаться #16

LK

-----BEGIN RSA PRIVATE KEY-----
key
-----END RSA PRIVATE KEY-----
aws в таком втде приватный ключ даёт

да все так и есть

проект легаси, хз кто там и как настраивал сервер

источник

12:39пожаловаться #17

AS

Andrey Shuster in AWS_RU

Иногда некоторые сервисы добавляют отсебятину в виде \n при копипасте многострочных текстов.

источник

12:51пожаловаться #18

JR

Jürgen Romins in AWS_RU

всем привет, клиенту скинул Key-pair ( PEM file )

-----BEGIN CERTIFICATE-----
.... key 
-----END CERTIFICATE-----

пытаюсь подключиться через ssh
ssh -v -i ~/.ssh/private.pem user@host.com

получаю лог

debug1: Will attempt key: /home/user/.ssh/private.pem  explicit
debug1: SSH2_MSG_SERVICE_ACCEPT received
debug1: Authentications that can continue: publickey
debug1: Next authentication method: publickey
debug1: Trying private key: /home/user/.ssh/private.pem
Load key "/home/user/.ssh/private.pem": invalid format
debug1: No more authentication methods to try.
user@host.com: Permission denied (publickey).

Private key который скинул мне клиент есть y Key pair, и приаттачен к тому серверу к которому я подключаюсь

попробуй сконвертировать

источник

12:58пожаловаться #19

LK

попробуй сконвертировать

у что сконвертировать ?

источник

12:59пожаловаться #20