GK
По поводу захвата рынка, мы вот с Амазона на Gcp стек перекатываемся. Но правда очень медленно и со скрипом
зачем, что понравилось?
Size: a a a
2019 May 17
GP
зачем, что понравилось?
цена
S
Инкрементальное не умеем , но большие таблицы умеем
я может не заметил, но тема не раскрыта )
Т
Вдруг кому интересно
Т
Открылась регистрация на конференцию по Google Cloud.
Узнайте, как Google Cloud может помочь вам развиваться благодаря лучшей в своем классе инфраструктуре и ускорению получения информации.
Cloud Day Kyiv, 13th June 2019, free.
via @BigQuery
Узнайте, как Google Cloud может помочь вам развиваться благодаря лучшей в своем классе инфраструктуре и ускорению получения информации.
Cloud Day Kyiv, 13th June 2019, free.
via @BigQuery
OP
слушайте, а если запускать в режиме по умолчанию спарк-сабмит то экзекутор и драйвер так же поднимается по 1г или там общее место ?
K
я может не заметил, но тема не раскрыта )
А как раскрыть ?
S
как в итоге переливаете большие таблицы? или зависит от базы?
M
зачем, что понравилось?
Нам Гугл пообещал кучу скидок и чуть ли не платить за это
EV
слушайте, а если запускать в режиме по умолчанию спарк-сабмит то экзекутор и драйвер так же поднимается по 1г или там общее место ?
Как в spark-defaults написано так и будет по идее
K
как в итоге переливаете большие таблицы? или зависит от базы?
Сейчас полный дамп раз в сутки
S
Сейчас полный дамп раз в сутки
Большая таблица - Это насколько большая?)
AZ
Большая таблица - Это насколько большая?)
когда select count(*) ломается 😊
A
Ну кассандра и hbase это совсем немного :)
K
Большая таблица - Это насколько большая?)
Я не сориентирую сейчас по размеру , в районе миллиарда записей
K
Но там уже без разницы
AZ
надо делать select sum(1.0) или кастить в бигинт
K
В тред призывается @sutuginandrey
S
Я не сориентирую сейчас по размеру , в районе миллиарда записей
Многопоток, дампы?
S
Ну кассандра и hbase это совсем немного :)
Как ваш феникс?