Size: a a a

2021 January 07

A

Alex in Data Engineers
а как там таракан по скорости сейчас? когда только начинали они же сами и говорили что скорость не главное, но потом вроде что-то делали с этим
источник

AZ

Anton Zadorozhniy in Data Engineers
оно и сейчас не главное
источник

AZ

Anton Zadorozhniy in Data Engineers
смотря для чего, для мастерданных и всяких каталогов - то что надо
источник

A

Alex in Data Engineers
ну в этом смысле да
мне вообще интересно было
источник

A

Alex in Data Engineers
Anton Zadorozhniy
в чатике строителей СУБД люди из таракана хвастались
а чатик секретный или можешь поделиться?
источник

AZ

Anton Zadorozhniy in Data Engineers
формат свой имеет смысл изобретать чтобы поддерживать широкую функциональность СУБД - индексы, историзм, и проч.. другое дело что современные форматы по больше части это обертки вокруг паркета с авро, но все равно нормально
источник

AZ

Anton Zadorozhniy in Data Engineers
Alex
а чатик секретный или можешь поделиться?
секретный, сорян
источник

AZ

Anton Zadorozhniy in Data Engineers
у фаерболта, думаю, прям свой-свой формат, это прям такой основательный израильский стартап, связанный с академией, они пушат свой формат как одно из главных преимуществ
источник

AT

Al T in Data Engineers
ясно, спросим у израильских товарищей - чего они знают...
источник

AT

Al T in Data Engineers
ой, да у них команда из Sisense - работал я с Sisense несколько лет - отличный маркетинг, про сам продукт такого сказать не могу... наверное за сноуфлейк переживать не стоит ))
источник

AZ

Anton Zadorozhniy in Data Engineers
ну вообще за компании переживать не стоит, но сноуфлейк достанут не эти так другие, там началась обычная гонка к нулю (по марже 😊), сноуфлейк даже сейчас убыточный
источник

AZ

Anton Zadorozhniy in Data Engineers
K S
Похоже что на датанодах локальные диски
это хорошо, вам сеф не нужен
источник
2021 January 08

KS

K S in Data Engineers
Компанию Snowflake может убить AWS, как всегда в своём стиле - скопировать идею, слегка улучшить и задавить конкурентов ценой. Сделают какой нибудь RedFlake и откусят значительный кусок рынка у Snowflake, оставив им только GCE и Azure.
источник

N

Nikolay in Data Engineers
K S
Компанию Snowflake может убить AWS, как всегда в своём стиле - скопировать идею, слегка улучшить и задавить конкурентов ценой. Сделают какой нибудь RedFlake и откусят значительный кусок рынка у Snowflake, оставив им только GCE и Azure.
Так же и AWS может убить SNowflake. Это более вероятнее у четом ресурсов Амазона
источник

KS

K S in Data Engineers
Nikolay
Так же и AWS может убить SNowflake. Это более вероятнее у четом ресурсов Амазона
Похоже что мы говорим об одном и том же.
источник

N

Nikolay in Data Engineers
ах, да. Пародон. Невнимательно прочел.
источник

SS

Sergey Shushkov in Data Engineers
K S
Компанию Snowflake может убить AWS, как всегда в своём стиле - скопировать идею, слегка улучшить и задавить конкурентов ценой. Сделают какой нибудь RedFlake и откусят значительный кусок рынка у Snowflake, оставив им только GCE и Azure.
Да у них и так редшифт есть для аналитики и отдельные инстансы со своими версиямм простгре
источник

VS

Vasily Surov in Data Engineers
Al T
интересно больше за счет чего и почему
Смотрел их презентацию, как я понял такая разница получается за счет предварительной материализации "композитных индексов". Раз посчитали - аггрегацию сохранили, а дальше просто: меньше читать - быстрее считать
источник
2021 January 09

KS

K S in Data Engineers
Можно ли как-то читать wal файл с разных Postgres хостов с одного хоста, что то типа реплики, только для многих хостов?
источник

KS

K S in Data Engineers
Есть несколько десятков серверов с репликами (для чтения высоконагруженным приложением), есть мнение цеплять ещё по одной реплике(для бэкапа) на каждый сервер, но это довольно таки накладно.
источник