А вот тут не подскажу :(

Сделай грязный хак, try { Class.load } catch {}

кто-нибудь при сборке с таким сталкивался?

* creating vignettes ... ERROR

Attaching package: 'SparkR'

The following objects are masked from 'package:stats':

    cov, filter, lag, na.omit, predict, sd, var, window

The following objects are masked from 'package:base':

    as.data.frame, colnames, colnames<-, drop, endsWith, intersect,
    rank, rbind, sample, startsWith, subset, summary, transform, union

Picked up _JAVA_OPTIONS: -XX:-UsePerfData 
Picked up _JAVA_OPTIONS: -XX:-UsePerfData 
Error: A JNI error has occurred, please check your installation and try again
Exception in thread "main" java.lang.NoClassDefFoundError: org/slf4j/Logger
        at java.lang.Class.getDeclaredMethods0(Native Method)
        at java.lang.Class.privateGetDeclaredMethods(Class.java:2701)
        at java.lang.Class.privateGetMethodRecursive(Class.java:3048)
        at java.lang.Class.getMethod0(Class.java:3018)
        at java.lang.Class.getMethod(Class.java:1784)
        at sun.launcher.LauncherHelper.validateMainClass(LauncherHelper.java:544)
        at sun.launcher.LauncherHelper.checkAndLoadMain(LauncherHelper.java:526)
Caused by: java.lang.ClassNotFoundException: org.slf4j.Logger
        at java.net.URLClassLoader.findClass(URLClassLoader.java:382)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:418)
        at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:352)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:351)
        ... 7 more
Quitting from lines 79-81 (sparkr-vignettes.Rmd) 
Error: processing vignette 'sparkr-vignettes.Rmd' failed with diagnostics:
JVM is not ready after 10 seconds
Execution halted

Собирал

./dev/make-distribution.sh --name with-hive --pip --r --tgz -Phadoop-provided,sparkr,hive,hive-thriftserver,yarn -Pscala-2.12 -DskipTests

* creating vignettes ... ERROR

Attaching package: 'SparkR'

The following objects are masked from 'package:stats':

    cov, filter, lag, na.omit, predict, sd, var, window

The following objects are masked from 'package:base':

    as.data.frame, colnames, colnames<-, drop, endsWith, intersect,
    rank, rbind, sample, startsWith, subset, summary, transform, union

Picked up _JAVA_OPTIONS: -XX:-UsePerfData 
Picked up _JAVA_OPTIONS: -XX:-UsePerfData 
Error: A JNI error has occurred, please check your installation and try again
Exception in thread "main" java.lang.NoClassDefFoundError: org/slf4j/Logger
        at java.lang.Class.getDeclaredMethods0(Native Method)
        at java.lang.Class.privateGetDeclaredMethods(Class.java:2701)
        at java.lang.Class.privateGetMethodRecursive(Class.java:3048)
        at java.lang.Class.getMethod0(Class.java:3018)
        at java.lang.Class.getMethod(Class.java:1784)
        at sun.launcher.LauncherHelper.validateMainClass(LauncherHelper.java:544)
        at sun.launcher.LauncherHelper.checkAndLoadMain(LauncherHelper.java:526)
Caused by: java.lang.ClassNotFoundException: org.slf4j.Logger
        at java.net.URLClassLoader.findClass(URLClassLoader.java:382)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:418)
        at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:352)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:351)
        ... 7 more
Quitting from lines 79-81 (sparkr-vignettes.Rmd) 
Error: processing vignette 'sparkr-vignettes.Rmd' failed with diagnostics:
JVM is not ready after 10 seconds
Execution halted

./dev/make-distribution.sh --name with-hive --pip --r --tgz -Phadoop-provided,sparkr,hive,hive-thriftserver,yarn -Pscala-2.12 -DskipTests

это про Spark

сейчас все на спарке сидят?

смотря для чего, задачи ведь разные

коллеги,

у меня есть к вам один интересный вопрос. или предложение.

точнее, к тем из вас, кто готов потратить некоторое время на чтение серии статей про кейс геоинформационной системы, которую разрабатывает моя контора. я готовлю выход части нашего тулсета (который на Spark) в опенсорс, но чтобы оно взлетело, мне нужно создать начальный публичный контекст. и требуется конструктивный фидбек со стороны.

опубликовано будет на хабре где-то через пару недель. если ваш фидбэк окажется полезным, и у вас есть там профиль — укажу в качестве рецензентов.

и, конечно же, я буду кидать ссылки в этот канал по мере публикации.

если интересно поучаствовать — напишите в личку

@pomadchin твои конкуренты кажись

готов почитать и поучаствовать!

¯\_(ツ)_/¯

чем плохо? Тулинг в гис предмет отдельных страданий

так и не было про плохо

я все жду твоего повествования

один есть, нужно хотя бы трое. заявки принимаю до конца недели :))

@fall_out_bug ^

да без проблем 🙂 записывай!

тут же вопрос не в набрать 3х, а те кто в теме
например я с гис никогда не сталкивался

можно быть в теме просто бигдаты и спарка в амазоне

пас, всегда свои хадуп кластера =)

я бы в вопросе сразу указал кого ищешь и ожидаемые навыки, чтобы было более релевантно