Size: a a a

2021 December 26

ЕГ

Евгений Глотов... in Moscow Spark
Шафл трекер же в спарке есть
источник

A

Alex in Moscow Spark
Вот он и выбирает кого килять насколько помню
источник

ЕГ

Евгений Глотов... in Moscow Spark
Ну он должен быть умный
источник

ЕГ

Евгений Глотов... in Moscow Spark
Он же на драйвере, драйвер лучше знает, что ему надо, а что нет
источник

A

Alex in Moscow Spark
А проджект тангстен обещал решить проблемы с производительностью
источник

ЕГ

Евгений Глотов... in Moscow Spark
Нет производительности - нет проблем
источник

ЕГ

Евгений Глотов... in Moscow Spark
источник

NN

No Name in Moscow Spark
Держи в курсе, мы тоже планируем потестить, посмотреть.
источник

A

Alex in Moscow Spark
Ну это уже в след году :) в этом отпуск на след неделе, покататься по стране
источник

NN

No Name in Moscow Spark
Ну это само собой, я тоже не собираюсь погружаться ни во что новое в этом году)
источник

ЕГ

Евгений Глотов... in Moscow Spark
источник
2021 December 27

Н

Наталия in Moscow Spark
))
источник
2021 December 28

N

Nick in Moscow Spark
Всем привет! Прочитал кучу информации про cache, но так и нигде не увидел одного важного момента. Возможна ли потеря данных при ООМ или отказах одной из нод на которой хранилась часть данных?
источник

N

Nick in Moscow Spark
Стратегия память_диск)
источник

ЕГ

Евгений Глотов... in Moscow Spark
Пересчитает просто таски и подкеширует обратно
источник

ЕГ

Евгений Глотов... in Moscow Spark
Потери не будет
источник

N

Nick in Moscow Spark
Даже если весь рдд был в памяти одной машины, которая упала?
источник

ЕГ

Евгений Глотов... in Moscow Spark
Да, тогда просто всё заново будет перечитываться
источник

N

Nick in Moscow Spark
Спасибо
источник

AS

Andrey Smirnov in Moscow Spark
всё это только то что было на той ноде или вообще на всех нодах?
источник