b
Это в альфа режиме, и нам включили, он как раз сейчас молотит, но начальная выгрузка уже длится больше дня
Size: a a a
2021 April 14
b
Но что касается данных в настоящем времени - там да, достаточно прикольно работает, все нравится. Но вот из backfill'а до сих пор подтягивается и я собственно ищу какие-то другие пути на случай если не отработает.
AZ
Наверное у них появится какой-то initial load сервис, но сейчас действительно альфа (можно как раз поддержку озадачить, может они поднимут фичу)
PA
Google DataFusion
PA
я не знаю как в Оракле но для sql server есть capture data change, mysql - binlog для того чтобы вытягивать только разницу с последней загрузки
UR
Там больше зависит от того, насколько сильно и как именно загружен инстанс и много или мало для него 300 гигов.
UR
Выше товарищ правильно говорит, возможно проще в текст
4
Тут можно задавать вопросы по эластику?
b
Cdc настроили уже, пытаемся выгрузить начальные данные. Через тот же механизм который грузит cdc уже день грузится.
b
Всего вся база 2 терабайта где-то
PA
ох жесть.. тогда согласен с коллегой который предлагает в паркет а потом уже по сдс процедуре забирать
KO
на одном из проектов я использовал https://ru.wikipedia.org/wiki/FitNesse для автоматизации тестирования DWH... но инструмент очень не user friendly) придётся поразбираться некоторое время
4
спасибо!
GP
up, расписание https://datalove.konfy.care/schedule/
2021 April 15
ИК
Где же Холден в расписании? Опять делегирует?
AS
котиков не будет,?! не ну я так не играю
GP
Холден там есть (хм интересно где)
GP
Эх наверн не смогла