Size: a a a

2020 February 10

k

kSandr in DevOps
А есть нарайоне эксперты по гуглклауду ?
источник

ЕО

Евгений Омельченко in DevOps
Или после чертей? 🤔
источник

ЕО

Евгений Омельченко in DevOps
kSandr
А есть нарайоне эксперты по гуглклауду ?
Тут точно есть эксперты по гуглклауду, а в чём вопрос?
источник

k

kSandr in DevOps
Меня интересуют практики и кто-как считает бабки за ггулклауд, биллинги и вот это вот все. + как доп, вопрос можно-ли повесить лейбл на select из bigquery. И как лучше всего трекать расходы на bigquery
источник

ЕО

Евгений Омельченко in DevOps
А, ты про биллинг гуглклауда. Не факт, что тут есть такие эксперты
источник

k

kSandr in DevOps
Ну у меня прост есть какое-то понимание + какие-то самопридуманные решения, хотелось-бы больше понимания от того, кто действительно в этом разбирается, что-бы быть уверенным, что я не делаю херню и т.п.
источник

DS

Dmitry Sergeev in DevOps
kSandr
Меня интересуют практики и кто-как считает бабки за ггулклауд, биллинги и вот это вот все. + как доп, вопрос можно-ли повесить лейбл на select из bigquery. И как лучше всего трекать расходы на bigquery
Я знаю как трекать расходы. Бизнес их увидет и скажет переходить на clickhouse развернутый на dedicated в hetzner😁
источник

LB

Let Eat Bee in DevOps
kSandr
Меня интересуют практики и кто-как считает бабки за ггулклауд, биллинги и вот это вот все. + как доп, вопрос можно-ли повесить лейбл на select из bigquery. И как лучше всего трекать расходы на bigquery
BigQuery прожорлив, там есть custom quotas , без которых давать его в руки людям страшно
источник

k

kSandr in DevOps
Let Eat Bee
BigQuery прожорлив, там есть custom quotas , без которых давать его в руки людям страшно
ну да , он у меня на проекте достаточно много кушает, посему хочется максимально детально его трекать. Т.Е. какой сервис сколько конкретно кушает денех с него и т.п.
На данный момент пришел к выгрузке аудит-логов в bq и анализу расходов непосредственно через логи суммируя каждый запрос и т.п. В целом в гугловых доках про это и написано, единственное вот думаю возможно ли как-то навешивать лейблы с клиентской стороны на запрос или нет. Пока мысли трекать по serviceaccount и user_agent -у , возможно еще там поидее метадату можно навешивать дополнительно будет .
источник

k

kSandr in DevOps
Но хочется более глубокого понимания ситуации от разбирающихся
источник

k

kSandr in DevOps
Насколько удалось нагуглить пока, лейблы навешиваются ток на датасеты и таблички
источник

DS

Dmitry Sergeev in DevOps
kSandr
ну да , он у меня на проекте достаточно много кушает, посему хочется максимально детально его трекать. Т.Е. какой сервис сколько конкретно кушает денех с него и т.п.
На данный момент пришел к выгрузке аудит-логов в bq и анализу расходов непосредственно через логи суммируя каждый запрос и т.п. В целом в гугловых доках про это и написано, единственное вот думаю возможно ли как-то навешивать лейблы с клиентской стороны на запрос или нет. Пока мысли трекать по serviceaccount и user_agent -у , возможно еще там поидее метадату можно навешивать дополнительно будет .
а сколько если не секрет? И сколько данных там?
источник

DS

Dmitry Sergeev in DevOps
меньше 20K долларов?
источник

DS

Dmitry Sergeev in DevOps
с это я так понял не просто для аналитики, а ещё сервисы какие-то с ними работают. Ну то есть постоянный workload на них, с периодическими select запросами?
источник

LB

Let Eat Bee in DevOps
Если за десяток переваливает , то можно flat rate купить
источник

LB

Let Eat Bee in DevOps
Но вообще я краем уха слышал,что люди view создают и раздают их, а сами датасеты нет
источник

LB

Let Eat Bee in DevOps
Let Eat Bee
Но вообще я краем уха слышал,что люди view создают и раздают их, а сами датасеты нет
Это для защиты от случайных селектов без where
источник

k

kSandr in DevOps
хм, постараюсь разобраться с view , возможно в этом действительно будет смысл , спасибо интересная наводка
источник

LB

Let Eat Bee in DevOps
По мне так лучше на пользователей квоты навесить и не мучаться
источник
2020 February 11

AS

Aleksey Smirnov in DevOps
Dmitry Sergeev
Я знаю как трекать расходы. Бизнес их увидет и скажет переходить на clickhouse развернутый на dedicated в hetzner😁
источник