SI
Size: a a a
2021 August 08
ПФ
Returns a new Dataset that has exactly numPartitions partitions.
ПФ
не тот метод
AV
Кнопка соурс может помочь
ПФ
Они специально ничего не пишут, я уверен
SI
Она отправляет на сорцы пайспарка, который через py4j форвардит в jvm
ПФ
А, про пайспарк не знаю
SI
Ага, при этом по какому принципу происходит репартицирование не понятно
AV
А, всмысле хотелось описания словами, ок
ПФ
Ну так и нет никакиз гарантий
ПФ
Они, я уверен специально этого не специфицируют
SI
Типа, вдруг все кроме одной партиции будут пустыми — тоже вполне поведение удовлетворяет доке
ПФ
так и есть
SI
При этом де-факто очень много эта сигнатура используется
SI
Часто, например, при сохранении на диск
ПФ
опять же, они, я уверен, это ен специфицируют специально
GP
Разбивает твой датасет на партиции; типо у тебя датасет (1,2,3); сделаешь репартишн на три и у тебя каждая цифра будет в своей партиции
GP
(: я хз это ли те хотелось услышать или не
GP
шафл случается, разумеется; раскидывать так можно твои записи на разные машины
GP
Ну пай спарк также как обычный