В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1724 membersпожаловаться на группу
2017 May 29

GP

Grigory Pomadchin in Data Engineers
sticker.webp
(25.96 Кб)
источник
18:29пожаловаться#1

GP

Grigory Pomadchin in Data Engineers
уже лучше)
источник
18:29пожаловаться#2

GP

Grigory Pomadchin in Data Engineers
а что делать пытаешься консоль открыть или что?)
источник
18:29пожаловаться#3

GP

Grigory Pomadchin in Data Engineers
сколько ты дал спарку?
источник
18:29пожаловаться#4

ὦ

ὦan in Data Engineers
python server.py
источник
18:29пожаловаться#5

ὦ

ὦan in Data Engineers
Grigory Pomadchin
сколько ты дал спарку?
Так, а где это посмотреть?
источник
18:29пожаловаться#6

ὦ

ὦan in Data Engineers
Просто я знаю как джавовской идее дадь больше хипу
источник
18:31пожаловаться#7

ὦ

ὦan in Data Engineers
но как в таком случае я не знаю совершено
источник
18:31пожаловаться#8

ὦ

ὦan in Data Engineers
Хотя я нашел только
spark.memory.offHeap.size
источник
18:32пожаловаться#9

AM

Aleksander Melnichnikov in Data Engineers
Не могу посмотреть проект. У тебя  там скала или питон ?(контекст спарка как создаётся )
источник
18:32пожаловаться#10

GP

Grigory Pomadchin in Data Engineers
питон*
источник
18:33пожаловаться#11

GP

Grigory Pomadchin in Data Engineers
да тоже сча полез в проект
источник
18:33пожаловаться#12

ὦ

ὦan in Data Engineers
источник
18:33пожаловаться#13

GP

Grigory Pomadchin in Data Engineers
вот
источник
18:33пожаловаться#14

GP

Grigory Pomadchin in Data Engineers
https://github.com/jadianes/spark-movie-lens/blob/master/start_server.sh
GitHub
jadianes/spark-movie-lens
spark-movie-lens - An on-line movie recommender using Spark, Python Flask, and the MovieLens dataset
источник
18:33пожаловаться#15

AM

Aleksander Melnichnikov in Data Engineers
"spark.executor.memory", "10g" нужно в контекст настройку пропихнуть
источник
18:34пожаловаться#16

AM

Aleksander Melnichnikov in Data Engineers
где 10g это размер хипа
источник
18:34пожаловаться#17

AM

Aleksander Melnichnikov in Data Engineers
для кластерных машин
источник
18:34пожаловаться#18

AM

Aleksander Melnichnikov in Data Engineers
SpakConf().setAppName - там еще есть метод для пропихивания настроек
источник
18:35пожаловаться#19

ὦ

ὦan in Data Engineers
Grigory Pomadchin
https://github.com/jadianes/spark-movie-lens/blob/master/start_server.sh
GitHub
jadianes/spark-movie-lens
spark-movie-lens - An on-line movie recommender using Spark, Python Flask, and the MovieLens dataset
точно, мой косяк, забыл дописать путь до своей версии
источник
18:35пожаловаться#20