Size: a a a

2019 August 05

YI

Yukari I in Data Engineers
Yukari I
Если говорить про современные олтп системы, это скорее вопросы архитектуры приложения и базы данных. В частности нормализация отношений в таблицах
Целью совокупности этих подходов служит ускорение мелких операций
источник

В

Вадим in Data Engineers
почему то я всегда думал что в ОЛАП наличие транзакций вообще никаким образом не обязательно
источник

В

Вадим in Data Engineers
в том же кликхаусе нет никаких гарантий что insert данных на одном шарде даст тебе актуальные данные на другом шарде(в тот же момент времени)
источник

В

Вадим in Data Engineers
ну и соответственно транзакций там нет от слова совсем
источник

YI

Yukari I in Data Engineers
Вадим
ну и соответственно транзакций там нет от слова совсем
Как же нет
источник

YI

Yukari I in Data Engineers
Транзакция это понятие из теории бд, к олап оно применятся так же, как и к олтп
источник

YI

Yukari I in Data Engineers
Вадим
в том же кликхаусе нет никаких гарантий что insert данных на одном шарде даст тебе актуальные данные на другом шарде(в тот же момент времени)
Там не про момент времени, там про завершение транзакции, а если совсем точно - про операцию коммит
источник

DV

Daniil Vorobeyv in Data Engineers
Так все-таки какие инструменты (фреймворки) используются при "обработке"?
источник

В

Вадим in Data Engineers
Yukari I
Там не про момент времени, там про завершение транзакции, а если совсем точно - про операцию коммит
источник

В

Вадим in Data Engineers
Yukari I
Там не про момент времени, там про завершение транзакции, а если совсем точно - про операцию коммит
согласно cap теореме, нету в кликхаусе транзакций :)
источник

DV

Daniil Vorobeyv in Data Engineers
Вот есть инструмент /фреймворк - Pytorch, вот он же не используется при "обработке"
источник

YI

Yukari I in Data Engineers
Вадим
согласно cap теореме, нету в кликхаусе транзакций :)
Если неполное, то их нет. Вы правы.
источник

А

Алексей in Data Engineers
Кто-нить пробовал mat view  в hive 3? Запросы нормально реврайтятся? И нет проблем с инкрементальным ребилдом?
источник

AK

Alexander Klein in Data Engineers
В чём тогда профит КХ? Если им разреженный индекс не нравится, то его можно не делать или перестраивать
источник

DM

Daniel Matveev in Data Engineers
Daniil Vorobeyv
Так все-таки какие инструменты (фреймворки) используются при "обработке"?
очень странный вопрос
по сути равносилен "чем работать с базой данных"

ну скачать дрова к ней и кодить
как кодить - зависит от мира конкретного яп
источник

YI

Yukari I in Data Engineers
Alexander Klein
В чём тогда профит КХ? Если им разреженный индекс не нравится, то его можно не делать или перестраивать
Колоночный, распределенный, оптимизированный под хранение временных рядов, бесплатный
источник

YI

Yukari I in Data Engineers
У кх очень  ного общего с вертикой
источник

В

Вадим in Data Engineers
Yukari I
Колоночный, распределенный, оптимизированный под хранение временных рядов, бесплатный
а еще документация есть на русском
источник

В

Вадим in Data Engineers
и из кафки напрямую можно пулять сообщения
источник

DV

Daniil Vorobeyv in Data Engineers
Daniel Matveev
очень странный вопрос
по сути равносилен "чем работать с базой данных"

ну скачать дрова к ней и кодить
как кодить - зависит от мира конкретного яп
Так все-таки какие инструменты используются при "обработке"? Что из экосистемы Hadoop используется в OLTP?
источник