IA
может вы и правы. но до CH даже и опенсорса не было никакого вообще. до 2016.
Size: a a a
2020 November 07
N
Просто kdb менее известен , что вертика , но у нас например ее используют.
IA
может вы правы, первый раз слышу
IA
просто я рекламой занимался
IA
и там адовые объемы
IA
и все идут за хадупом
IA
кто не может в vertica или в гугл-амазон
IA
а тут появился CH бесплатный
N
Так hadoop и вертика, кликзаус это про разное. Это в основном mapreduce vs пайплайн.
IA
у вас пару петабайт событий, хотите антифрод написать. что возьмете если нет кликхауса/вертики?
плюс вы хотите по данным бегать туда сюда, считать окна скользящие итп
плюс вы хотите по данным бегать туда сюда, считать окна скользящие итп
N
Вертика , кликзаус - это МПП базы , а какой-нибудь hive , spark - это больше про фол толеранс обработку. Но это уже про другое . Мы же говорим, что Яндекс делает базу у которой десяток тысяч звёзд на гитхаба.ей пользуются и на всех континентах . Это и есть мировой уровень.
IA
hive, spark это поверх HDFS
IA
это hadoop экосистема
N
Igor A
hive, spark это поверх HDFS
Нет. Spark можно использовать и вообще без hdfs. Например с s3 часто используют. Причем с s3 довольно часто. Где то процентов 20 случаев , наверное.
IA
я просто спросил что возьмете , ну вот нет у вас clickhouse, amazon, google, vertica
и сам же ответил - пойдете в логово hadoop
и вы это же и написали )
и сам же ответил - пойдете в логово hadoop
и вы это же и написали )
p
Nikolay
Kdb с 1993 года. В Вики есть примеры и более раньи . А теория вся с 80х
Да, но новые paper'ы появляются тоже.
IA
иметь теорию и иметь production-ready доступные по цене решения - между этими фактами может и 10 лет пройти
IA
😅.
N
Да, но новые paper'ы появляются тоже.
Конечно. Пейперы постоянно появляются . Трудно найти ту область, что ещё актуальна, но там нету новых пейперов. Вот взять например как КХ хранит данные. Скорее было бы странным ,что если бы они не использовали наработки
p
Да и принципиально новое железо появляется, которого раньше не было