хаха

Вечер , конец недели)как тут не потупить)

Я еще хотел по одной теме по интересоватся. У нас в раз неделю на серверах запускается некоторые вычисления. После того как вычисления прошли, все данные отправляются в удаленное хранилище, вот в принципе и все. Потом сервера простаивают целую неделю без дела, и выжирают приличную сумму. Есть какой-то сервис в GCP, который бы позволил запускать вычислительные задачи по расписанию, и после того как задача выполнена все отключается?

а вычисления чем триггерятся?

так-то можно кубер сделать с автоскейлом например

А вот этого пока что не знаю. Так образно обрисовали задачу клиента, без какой либо архитектуры.
Тоже думал про k8s и автоскейлинг

вычисления на чем? хадуп-спарк, насколько понимаю, нативно поставляют именно с таким функционалом, закончилась джоба - закончились расходы

Там насколько знаю используется какой-то собственный софт

кажется preemptible instances + shutdown -h now будет достаточно

https://cloud.google.com/preemptible-vms/
https://cloud.google.com/compute/docs/instances/instance-life-cycle
https://cloud.google.com/compute/docs/instances/stop-start-instance#stopping_an_instance_through_the_os

насколько вижу, остановленные машины вообще денег не потребляют, preemptible еще и сами подчистятся, наверное

Спасибо. Возьму на заметку

А за дисковое пространство деньги не списывают?

там что-то было про локальные ссд, но в крайнем случае можно самостоятельно их сразу грохать

там есть опция автогроханья при убивании хоста

https://cloud.google.com/dataflow/docs/
Вот в этом можно крутануть

И вот тут:
https://cloud.google.com/composer/

Мы через композер фигачили джоб на создание датапрока, который убивался как только все посчитается

И данные аккуратно складывал в бакет

Смотря на задачу конечно же.
В большинстве случаев - не думаю что будет нужен нативный k8s

спасибо за идею