Size: a a a

2021 April 27

GP

Grigory Pomadchin in Data Engineers
готов но мне кажется когда оом случаеца или резко всему не хватает места
источник

GP

Grigory Pomadchin in Data Engineers
помоему у меня такая была прям проблема когда у меня у кластера одновременно не хватало и оперативы и дисков
источник

GP

Grigory Pomadchin in Data Engineers
и вместо того чтобы чтото вменяемое написать он кидал вот такое
источник

GP

Grigory Pomadchin in Data Engineers
дебаг улсожнялся тем что после того как он свалится он подчишал все засобой так что ничего незаметно было
источник

GP

Grigory Pomadchin in Data Engineers
ганглия конечно спалила все)
источник

ИК

Иван Калининский... in Data Engineers
Ну я так понял, что ребут кластера прям нужен, чтобы исправить ситуацию
источник

GP

Grigory Pomadchin in Data Engineers
ну мож темп какойто или чтото утекло
источник

GP

Grigory Pomadchin in Data Engineers
но в целом просто похоже на то что было
источник

ИК

Иван Калининский... in Data Engineers
А если только ребут помогает, значит какое-то состояние при этом обнуляется
источник

NN

No Name in Data Engineers
Мб юзер мемори на нодах переполняется, и почему-то только после ребута чистится?
источник

A

Aleksandra in Data Engineers
Интересно, что со временем нужно все чаще и чаще делать ребут. Раньше где-то раз в месяц делали, сейчас уже после 10 дней появляется проблема
источник

GP

Grigory Pomadchin in Data Engineers
темп какойто может не чиститься потому что что-то течет в партициях
источник

GP

Grigory Pomadchin in Data Engineers
и типа он не убирает партиции потому что думает что еще работает
источник

NN

No Name in Data Engineers
+
источник

NN

No Name in Data Engineers
Мб просто места становится все меньше, поэтому вот эти темповые файлы быстрее все забивают?
источник

GP

Grigory Pomadchin in Data Engineers
debugging by guesses
источник

ИК

Иван Калининский... in Data Engineers
Диагноз по сообщению об ошибке))
источник

GP

Grigory Pomadchin in Data Engineers
у нас тут прям кружок детективов доктора хауса
источник

NN

No Name in Data Engineers
Хах
источник

NN

No Name in Data Engineers
Ну вообще прикольно и интересно, обычно джоба после падения или киляния все за собой подчищает
источник