Size: a a a

2021 November 30

VI

Vladimir Ilyushkin in Moscow Spark
В dag смотреть или логах ?
источник

N

Nikita Blagodarnyy in Moscow Spark
ну так джойн тоже посредством шафла пытается собрать совпадающие ключи соединения на одном экзекуторе.
источник

N

Nikita Blagodarnyy in Moscow Spark
в данные
источник

N

Nikita Blagodarnyy in Moscow Spark
источник

N

Nikita Blagodarnyy in Moscow Spark
уэлком то сарвар мистар
источник

VI

Vladimir Ilyushkin in Moscow Spark
It's for me ?
источник

GP

Grigory Pomadchin in Moscow Spark
@tenKe вот так надо делать
источник

t

tenKe in Moscow Spark
ничо не понятн( какие то шафлы партиции
источник

VI

Vladimir Ilyushkin in Moscow Spark
+
источник
2021 December 01

VI

Vladimir Ilyushkin in Moscow Spark
Как я понял из этого видео получается я ничего не смогу сделать пока не сделаю repartition или salt, т.е. пересобрать полностью таблицу.
источник

☭S

☭ ⤳ λ Shinkevich... in Moscow Spark
Если вопрос еще актуален, то помогает это
JdbcDialects.registerDialect(ClickHouseDialect)

https://github.com/housepower/ClickHouse-Native-JDBC/blob/master/clickhouse-integration/clickhouse-integration-spark/src/main/scala/org/apache/spark/sql/jdbc/ClickHouseDialect.scala
источник

R

R in Moscow Spark
Мне кажется вопросы правильней было бы задавать на стек оверфлоу и отвечать на них там же, хотя бы польза для комьюнити, другие смогут найти
источник

R

R in Moscow Spark
А ответы здесь по сути - в никуда. Даже из тысячи человек здесь сидящих далеко не все будут искать по истории чата
источник

ИК

Иван Калининский... in Moscow Spark
Кто-то поищет, пусть даже всего десять из тысячи)
источник

R

R in Moscow Spark
Так можно же эффективней делиться знаниями и приносить пользу сообществу, причем не намного сложней. Почему бы не сделать это?)
источник

ИК

Иван Калининский... in Moscow Spark
ну, чат обычно для текучки, быстро спросил, выяснил, уточнил детали. Ну или пошёл ртфмить
источник

R

R in Moscow Spark
Ну при таком подходе будем отвечать по 10 раз на один и тот же вопрос и все равно ответ в итоге канет в небытие
источник

ИК

Иван Калининский... in Moscow Spark
в таком случае надо прекращать отвечать на вопросы, направлять задающих на СО, самим туда же. Чат только для обсуждения экосистемы, объявлений и всего такого
источник

R

R in Moscow Spark
Холиваров ещё :)
источник

ИК

Иван Калининский... in Moscow Spark
это и есть обсуждение экосистемы)) когда действительно не безразлично
источник