Size: a a a

2021 February 08

AE

Alexey Evdokimov in Data Engineers
свою обёртку написать что ли по типу JdbcRDD ?
источник

AE

Alexey Evdokimov in Data Engineers
но раз стрим отмотать нельзя, и в память целиком оно не влазит, то с каждым новым партом придётся проматывать всё больше и больше записей из исходного стрима
источник

AE

Alexey Evdokimov in Data Engineers
ладно хоть генерит отдно и то же.

всё равно хрень какая-то
источник

AE

Alexey Evdokimov in Data Engineers
так, это ж всё непотребство на драйвере будет происходить. твою ж мать. чё делать-то...
источник

AZ

Anton Zadorozhniy in Data Engineers
Вот смотрите что принёс Твиттер сегодня https://research.google/pubs/pub49953/
источник

AE

Alexey Evdokimov in Data Engineers
какое же всё-таки жуткое моральное удовлетворение от удаления из продукта неиспользуемых фич. вот всегда бы так. вместо того, чтобы пытаться решить дикую задачу, выяснить, что никому она не нужна, и была добавлена просто до кучи.

меньше когда — меньше ужаса...
источник

K

KrivdaTheTriewe in Data Engineers
Alexey Evdokimov
какое же всё-таки жуткое моральное удовлетворение от удаления из продукта неиспользуемых фич. вот всегда бы так. вместо того, чтобы пытаться решить дикую задачу, выяснить, что никому она не нужна, и была добавлена просто до кучи.

меньше когда — меньше ужаса...
так на scala все перепишите, и оъем репы раз в 5 сократится
источник

AZ

Anton Zadorozhniy in Data Engineers
или на кложе
источник

AE

Alexey Evdokimov in Data Engineers
никого не волнует объём репы.

в отличии от покрытия кода, которое меня очень волнует
источник

AZ

Anton Zadorozhniy in Data Engineers
вообще сложно найти более вербозный язык чем ява
источник

AE

Alexey Evdokimov in Data Engineers
неиспользуемый код имеет свойство гнить
источник

K

KrivdaTheTriewe in Data Engineers
Alexey Evdokimov
никого не волнует объём репы.

в отличии от покрытия кода, которое меня очень волнует
так типы заменяют часть тестов)
источник

AE

Alexey Evdokimov in Data Engineers
тут проблема в интеграционных тестах
источник

AE

Alexey Evdokimov in Data Engineers
эт клиент внешней системы даёт кривое апи
источник

AE

Alexey Evdokimov in Data Engineers
а сэмулировать его несколько проблематично
источник

K

KrivdaTheTriewe in Data Engineers
дада
источник

K

KrivdaTheTriewe in Data Engineers
поэтому нужно написать кучу кода на джаве, и увеличить кодовую базу, чтобы еще и копипасты было много
источник

AS

Andrey Smirnov in Data Engineers
Anton Zadorozhniy
вообще сложно найти более вербозный язык чем ява
по мне go более вербозный, да и плюсы тоже такое
источник

AE

Alexey Evdokimov in Data Engineers
¯\_(ツ)_/¯
источник

AZ

Anton Zadorozhniy in Data Engineers
раньше часто видел проекты где тестовые оснастки больше и сложнее бизнес логики
источник