DZ
Валидно, но без рантайма спарка все равно огромная экономия
Size: a a a
2021 October 09
ЕГ
Ну, если читаешь из рдб и пишешь в хдфс, чем пишешь
DZ
Качать в много потоков не всегда быстрее чем в один.
ЕГ
3тб в один поток?😐
ЕГ
Ну кстати ради прикола можно на спарке запустить udf с твоим кодом, который будет читать и писать😆
ЕГ
Подзапрос по partition_id
DZ
А думаешь бд в много потоков тебе збс отдаст? Если есть индекс и ты в него улетишь то можно делить, если нет, то смысла нет. Ботлнек диски бд и сеть
ЕГ
В 200 потоков из постгреса грузили, полёт нормальный
DZ
Пг через copy читает под капотом в много потоков, смысла в случае сек скан нет
ЕГ
На нём ещё джира с конфлюенсом работали как-то😆
ЕГ
Подвисали)
DZ
Это потешить себя цифрами, мы тоже так думали. Потом замеряли
DZ
Ботлнек был io дисков, пг в одну сессию отдавала как не в себя
DZ
Thumbrule, в общем случае разработчик тупее бд
DZ
Если это не кх конечно
ЕГ
2021 October 10
V
Привет! Организовываем конфу Podlodka Backend Crew #3, а я ищу спикеров!
В этот раз две больших темы на каждую неделю – Event driven подход и Проблемы микросервисов.
Если интересно и хочется поучаствовать – пишите в личку за подробностями
В этот раз две больших темы на каждую неделю – Event driven подход и Проблемы микросервисов.
Если интересно и хочется поучаствовать – пишите в личку за подробностями
D
А почему такая разница в цене для соло и от компании?
V
Аргумент "билеты для юрлиц просто всегда дороже" звучит так себе, но AFAIK, сейчас все так, потому что на личный билет цена даже занижена, а с билетом для юрлиц есть оформление полного пакета документов и курьер
2021 October 11
ПФ
А в чём разница? Я тут посмотрел работаем ли мы с ливи, вроде работаем и вроде или ноутбуки запускаются...