rG
Ох. Ладно. Пайплайн стал яснее. Вникаю дальше) не расходитесь тут, я еще поспотыкаюсь не раз в ближайшие недели)
Size: a a a
2021 July 02
2021 July 03
C
AT
Господа, а кто нить пробовал presto c alluxio - есть эффект?
rG
вот, поинформативнее кажись
K
Можно неудачно бакетирование включить :D
K
К сожалению проблема мелких файлов не решена на хдфс системно
K
Хорошая картинка , нужно украсть в слайды
rG
А мой вариант пониже, чем плох?
K
До него я не дочитал
rG
).. жду мнения. Я не шарю. Так что накапливаю всё для анализа)
rG
А вот когда спарком выбираешь из кафки, нужно вписать шему. Это некий шаблон? Где он определяется? Или есть некий дефолт?
NN
Особой разницы нет, в сущности, кроме того, что на Вашем дополнительно указано, что построение плана запроса идёт на драйвере, а дальше расчеты идут на экзекуторе.
rG
Но тут еще граф есть. И выделены общие цепи) я когда увидел прям прозрел локально)
NN
На предыдущей тоже все достаточно понятно отрисовано, по моему мнению. Но если Вам больше помогла Ваша, то могу только порадоваться.
rG
А насчет шемы?) можете прояснить?
NN
Я вообще не понял, о чем Вы, честно говоря.
rG