Size: a a a

2021 November 22

ME

Mikhail Epikhin in Moscow Spark
Ну вот да, я тоже про такое думаю. А кто-то умеет из них поверх s3 работать?
источник

AS

Alexander Shorin in Moscow Spark
Там вопрос не в порваться, а в порядке резолва.. Насколько я помню, спарк сначала идет во внешний maven, а уже только потом в локально переданные. Во всяком случае так было и давно уже не перепроверял.
источник

ME

Mikhail Epikhin in Moscow Spark
ну тут зависит от того на чем чаще рвется в конкретном случае.
У меня с резолвом нет проблем, systemd-resolved нормально кеширует
источник

AS

Alexander Shorin in Moscow Spark
А у нас просто в проде интернет заблочен, поэтому это проблема (:
источник

ME

Mikhail Epikhin in Moscow Spark
нет интернета, нет проблем
источник

ЕГ

Евгений Глотов... in Moscow Spark
Сам не поднимал, надо доки смотреть
источник

AS

Alexander Shorin in Moscow Spark
Ах если бы (:
источник
2021 November 23

А

Александр in Moscow Spark
Коллеги, а знает кто проблему Solr (8.8.1) с shard already locked с файлом write.lock. При заливке индекса через spark через некоторое время валится шарда. Файл write.lock на hdfs можно удалить, перезапустить солр, но проблема через время опять возникает при индексировании. Что делать?
источник
2021 November 24

D

Dmitry in Moscow Spark
Всем добрый вечер! Пытаюсь прочитать из ClickHouse поле типа UUID, но Спарк не принимает его.  Пытался через customSchema и принять как String, но не помогает. Как правильно сделать?
источник

N

Nikita Blagodarnyy in Moscow Spark
Обернуть на источнике во вьюху с кастом.
источник

VI

Vladimir Ilyushkin in Moscow Spark
Всем привет. Имеется стринга в паркете в нечитаемой кодировке ascii или cp1251. Как ее декодировать, что бы прочитать под спарком?
источник

ЕГ

Евгений Глотов... in Moscow Spark
UDF?
источник

VI

Vladimir Ilyushkin in Moscow Spark
А есть ещё способы кроме udf?
источник

ЕГ

Евгений Глотов... in Moscow Spark
источник

ЕГ

Евгений Глотов... in Moscow Spark
Нужен первый вариант, не оракловый😆
источник

ЕГ

Евгений Глотов... in Moscow Spark
"Полиморфизм" уже до sql добрался, ужас)
источник

VI

Vladimir Ilyushkin in Moscow Spark
Decode - вроде был как if else
источник

VI

Vladimir Ilyushkin in Moscow Spark
В ansi SQL
источник

ЕГ

Евгений Глотов... in Moscow Spark
Не, надо 2 аргумента и вторым кодировку
источник

ЕГ

Евгений Глотов... in Moscow Spark
Насчёт Анси вот чёт прям не уверен🤔
источник