Size: a a a

2021 January 29

AZ

Anton Zadorozhniy in Data Engineers
в смысле чего хотите от такого движка?
источник

A

Alex in Data Engineers
Ну думаю как всегда: быстро и дёшево
источник

KS

K S in Data Engineers
Anton Zadorozhniy
а зачем?
Статья сыровата и в ней маловато фактов, например бенчмарки для сравнения каких-либо параметров. Поэтому я и поинтересовался, возможно кто-то уже ковырял и может поделиться своими впечатлениями.
Что касается практического применения, пока это просто моё любопытство. Иногда какие то решения не востребованы сразу, а только через какое-то время.
источник

A

Alex in Data Engineers
Ну пока она ещё сырая для прода
источник

AZ

Anton Zadorozhniy in Data Engineers
K S
Статья сыровата и в ней маловато фактов, например бенчмарки для сравнения каких-либо параметров. Поэтому я и поинтересовался, возможно кто-то уже ковырял и может поделиться своими впечатлениями.
Что касается практического применения, пока это просто моё любопытство. Иногда какие то решения не востребованы сразу, а только через какое-то время.
если с целью поупражняться в разработке аналитических движков, или в расте - думаю это отличный проект
источник

KS

K S in Data Engineers
Alex
Ну думаю как всегда: быстро и дёшево
Именно так я и подумал, это же круто - обрабатывать те же объёмы меньшими ресурсами.
источник

AZ

Anton Zadorozhniy in Data Engineers
но если вы думаете про использование в сервисе, то это очень большой риск, неизвестно когда проект доберется до производительности хотя бы спарка даже на подмножестве фич, не говоря о том чтобы обгонять его
источник

AZ

Anton Zadorozhniy in Data Engineers
если доберется вообще
источник

KS

K S in Data Engineers
Anton Zadorozhniy
если с целью поупражняться в разработке аналитических движков, или в расте - думаю это отличный проект
Для разработки движков я слегка туповат. Скорее оптимизация существующих решений новыми средствами.
источник

ИК

Иван Калининский... in Data Engineers
Раз уж об этом зашла речь, что скажете про Weld?
https://www.weld.rs
источник

ИК

Иван Калининский... in Data Engineers
тоже rust и тоже малоизвестно))
источник

AZ

Anton Zadorozhniy in Data Engineers
в аналитическом софте очень много решают тупые человекочасы, особенно когда речь касается оптимизаторов, посмотрите что Спарк, со всеми его контрибьюторами, только-только какие-то оптимизации начал делать которые в МРР много лет уже общее место, вроде динамизма в плане
источник

A

Alex in Data Engineers
Иван Калининский
Раз уж об этом зашла речь, что скажете про Weld?
https://www.weld.rs
С завидно периодичностью про него рассказывают, не видел ни одного продакшена
=/
источник

ИК

Иван Калининский... in Data Engineers
https://www.weld.rs/images/graphs.png
Вот эта картинка очень вдохновляет взять и попробовать
источник

KS

K S in Data Engineers
Anton Zadorozhniy
но если вы думаете про использование в сервисе, то это очень большой риск, неизвестно когда проект доберется до производительности хотя бы спарка даже на подмножестве фич, не говоря о том чтобы обгонять его
Всегда есть периферийные проекты, где можно опробовать новые технологии, даже если они сыроваты. Само собой затащить в прод это никто не даст.
источник

ИК

Иван Калининский... in Data Engineers
Даже ТФ курит! Судя по этому бенчмарку надо скорее адоптить хД
Как так вообще возможно?
источник

KS

K S in Data Engineers
Иван Калининский
Раз уж об этом зашла речь, что скажете про Weld?
https://www.weld.rs
Интересный проект, поковыряю завтра.
источник

AZ

Anton Zadorozhniy in Data Engineers
Иван Калининский
Даже ТФ курит! Судя по этому бенчмарку надо скорее адоптить хД
Как так вообще возможно?
берем конкретный тест, профилируем по нему компонент и оптимизируем каждый шаг + критический путь
источник

A

Alex in Data Engineers
Anton Zadorozhniy
берем конкретный тест, профилируем по нему компонент и оптимизируем каждый шаг + критический путь
Старые добрые воины SPECjbb :)
источник

KS

K S in Data Engineers
Мужики, а вот ещё один проект upmem, который на мой взгляд имеет потенциал. Что скажете?
источник