В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

2053 membersпожаловаться на группу
2020 November 11

GP

Grigory Pomadchin in Data Engineers
чтоб парсить уметь ему тока спарк ярн нужен
источник
19:09пожаловаться#1

S

Sergey in Data Engineers
<dependency>
           <groupId>org.apache.spark</groupId>
           <artifactId>spark-yarn_2.12</artifactId>
           <version>3.0.1</version>
       </dependency>

       <dependency>
           <groupId>org.apache.spark</groupId>
           <artifactId>spark-sql_2.12</artifactId>
           <version>3.0.1</version>

       </dependency>
источник
19:12пожаловаться#2

S

Sergey in Data Engineers
все не лезет
источник
19:12пожаловаться#3

S

Sergey in Data Engineers
это единственные две зависимости что отноятся хоть каким нибудь образом к спарку/хадупу/ярну
источник
19:13пожаловаться#4

AS

Andrey Smirnov in Data Engineers
https://github.com/apache/spark/blob/b7fff0397319efd2987d4cceff4f738f1c06409d/core/src/main/scala/org/apache/spark/SparkContext.scala
вот здесь регулярки, которые должны матчиться на ваш урл, просто "yarn" не подойдет
GitHub
apache/spark
Apache Spark - A unified analytics engine for large-scale data processing - apache/spark
источник
19:14пожаловаться#5

GP

Grigory Pomadchin in Data Engineers
Andrey Smirnov
https://github.com/apache/spark/blob/b7fff0397319efd2987d4cceff4f738f1c06409d/core/src/main/scala/org/apache/spark/SparkContext.scala
вот здесь регулярки, которые должны матчиться на ваш урл, просто "yarn" не подойдет
GitHub
apache/spark
Apache Spark - A unified analytics engine for large-scale data processing - apache/spark
почему? должно работать
источник
19:15пожаловаться#6

GP

Grigory Pomadchin in Data Engineers
ну ошибка то имхо другая должна быть брошена
источник
19:16пожаловаться#7

GP

Grigory Pomadchin in Data Engineers
распарсить то распарсить
источник
19:16пожаловаться#8

S

Sergey in Data Engineers
Andrey Smirnov
https://github.com/apache/spark/blob/b7fff0397319efd2987d4cceff4f738f1c06409d/core/src/main/scala/org/apache/spark/SparkContext.scala
вот здесь регулярки, которые должны матчиться на ваш урл, просто "yarn" не подойдет
GitHub
apache/spark
Apache Spark - A unified analytics engine for large-scale data processing - apache/spark
ходил уже туда. на последнем элсе он уходит в прогрузку листа ExternalClusterManager, где нифига не находит и кидает эксепшн
источник
19:17пожаловаться#9

S

Sergey in Data Engineers
Убрал sparksql
источник
19:24пожаловаться#10

S

Sergey in Data Engineers
собрался через javasparkcontext и все взлетело.
источник
19:24пожаловаться#11

АР

Андрей Романов... in Data Engineers
а никто случайно не пробовал открывать веб-версию зеппелина на zepl.com ?

почему-то что и на телефоне, и на компьютере вот такая ошибка доступа, хотя остальные  сайты на cloudflare открываются без проблем
источник
21:50пожаловаться#12

АР

Андрей Романов... in Data Engineers
Хотел открыть ссылки которые здесь, если важно:

https://github.com/odnoklassniki/pravda-ml
GitHub
odnoklassniki/pravda-ml
This project is used to capture machine learning pipelines created on top of Spark as OK - odnoklassniki/pravda-ml
источник
21:51пожаловаться#13

Е

Егор Абросимов... in Data Engineers
Андрей Романов
а никто случайно не пробовал открывать веб-версию зеппелина на zepl.com ?

почему-то что и на телефоне, и на компьютере вот такая ошибка доступа, хотя остальные  сайты на cloudflare открываются без проблем
возможно, у тебя неправильный айпишник
источник
21:51пожаловаться#14

Е

Егор Абросимов... in Data Engineers
вот и денаит
источник
21:52пожаловаться#15

ME

Max Efremov in Data Engineers
Андрей Романов
а никто случайно не пробовал открывать веб-версию зеппелина на zepl.com ?

почему-то что и на телефоне, и на компьютере вот такая ошибка доступа, хотя остальные  сайты на cloudflare открываются без проблем
У меня работает
источник
21:53пожаловаться#16

Е

Егор Абросимов... in Data Engineers
я включил впн и всё норм
источник
21:54пожаловаться#17

АР

Андрей Романов... in Data Engineers
Егор Абросимов
я включил впн и всё норм
+
источник
21:54пожаловаться#18

Е

Егор Абросимов... in Data Engineers
*стало норм
источник
21:54пожаловаться#19

ME

Max Efremov in Data Engineers
По тем ссылка, кстати, 404
источник
21:54пожаловаться#20