Size: a a a

2019 June 28

S

Stanislav in Data Engineers
Alexey Belov
OGG4BD доведённый до промышленного состояния собственными ручками, патченный своими же ручками Sqoop, собственная Spark-джоба с поддержкой партиционирования снэпшота в parquet с логикой обработки схлопки PK update (если применимо к источнику)
и ради чего это все было?
источник

S

Stanislav in Data Engineers
большой оракл?
источник

AB

Alexey Belov in Data Engineers
Stanislav
большой оракл?
По сути - да. Только ценник на порядок меньше.
источник

AB

Alexey Belov in Data Engineers
Ну и ради прокачки инженерных скиллов, конечно :)
источник

S

Stanislav in Data Engineers
с ценником оггбд тебе как инженеру оракл должен ферари подогнать )
источник

AB

Alexey Belov in Data Engineers
Stanislav
с ценником оггбд тебе как инженеру оракл должен ферари подогнать )
Они снизили ценник в 4 раза после того, как мы альтернативное решение в Пром вывели.
источник

S

Stanislav in Data Engineers
можешь назвать порядок цены?
источник

AB

Alexey Belov in Data Engineers
Stanislav
можешь назвать порядок цены?
Если найду в открытом доступе материалы конкурса - скину в личку. Нет в открытом доступе - значит не назову.
источник

ЕГ

Евгений Глотов in Data Engineers
источник

S

Stanislav in Data Engineers
да ладно, есть открытый прайс
правда в нем нет собственно политики лицензирования
так то Oracle GoldenGate for Big Data (license $20k per CPU)
источник

S

Stanislav in Data Engineers
вот эти цпу - они считаются где?
источник

S

Stanislav in Data Engineers
: Oracle GoldenGate for Big Data, only the processors running the source Oracle or non Oracle database(s) or NoSQL repositories from which you capture data must be counted for the purpose of determining the
number of licenses required. For any messaging systems from which you capture, every 25 queues/topics are counted as a Processor. In the instance of multiple source databases, NoSQL repositories, or messaging systems all processors for all sources
must be counte
источник

a

agathis in Data Engineers
Stanislav
вот эти цпу - они считаются где?
На железке, на которой сам оракл крутится
источник

AB

Alexey Belov in Data Engineers
agathis
На железке, на которой сам оракл крутится
Либо на Downstream-сервере. Нужно уточнять у Oracle-а.
источник

IB

Ivan Blinkov in Data Engineers
Anton Kovalenko
2700 человек в русскоязычном телеграмм-канала (больше чем в этом btw) и 700 - в англоязычном
есть ещё 4-5 WeChat групп на 1500+ человек в сумме
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Говорят, еще в Китае кх попер... Но мопед не мой
источник

IB

Ivan Blinkov in Data Engineers
Vladislav 👻 Shishkov
Говорят, еще в Китае кх попер... Но мопед не мой
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Да да
источник
2019 June 29

КБ

Константин Белов in Data Engineers
ребят..., кто-нибудь запускал код параллельно чтоб работал на нескольких машинах ?
P.S. отпишитесь пожалуйста....маленький только вопрос у меня...

и кто-то уже использовал HOROVOD ?
источник

АЖ

Андрей Жуков in Data Engineers
Не,  мы тут только спарк в локал моде запускаем
источник