В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

3187 membersпожаловаться на группу
2021 October 15

AA

Artem Aliev in Data Engineers
https://stackoverflow.com/questions/36015864/hadoop-be-replicated-to-0-nodes-instead-of-minreplication-1-there-are-1
Stack Overflow
Hadoop: ...be replicated to 0 nodes instead of minReplication (=1). There are 1 datanode(s) running and no node(s) are excluded in this operation
I'm getting the following error when attempting to write to HDFS as part of my multi-threaded application

could only be replicated to 0 nodes instead of minReplication (=1).  There are 1 datanode(s)
источник
12:47пожаловаться#1

AA

Artem Aliev in Data Engineers
я голосую зa safe mode
источник
12:47пожаловаться#2

AA

Artem Aliev in Data Engineers
hdfs dfsadmin -safemode forceExit
источник
12:47пожаловаться#3

AK

Alex K in Data Engineers
Народ, вопрос от новичка, сильно не пинайте.
Дали на работе задание сделать джобу в хадуп, а я что-то вообще растерялся и не знаю куда бежать.
Это где-то в hue делается?
источник
13:41пожаловаться#4

N

Nikita Blagodarnyy in Data Engineers
любую?
источник
13:43пожаловаться#5

MK

Mikhail Kuznetsov in Data Engineers
Вводных маловато
источник
13:43пожаловаться#6

AK

Alex K in Data Engineers
Блин, так и думал
источник
13:44пожаловаться#7

AK

Alex K in Data Engineers
Надо про джобу больше?
источник
13:44пожаловаться#8

AK

Alex K in Data Engineers
Тип какая конкретно
источник
13:44пожаловаться#9

ЕГ

Евгений Глотов... in Data Engineers
Сделать джобу - это не бизнес-задача, начни с описания бизнес-задачи
источник
13:47пожаловаться#10

AK

Alex K in Data Engineers
так яснее не станет?
«Создать новый Job, который рассчитывает процент друзей …»
источник
13:47пожаловаться#11

A

Attenuator in Data Engineers
forceExit нету такого
источник
13:50пожаловаться#12

ЕГ

Евгений Глотов... in Data Engineers
Где лежат друзья?😆
источник
13:50пожаловаться#13

A

Attenuator in Data Engineers
Снимок экрана 2021-10-15 в 13.47.18.png
(247.53 Кб)
если запустить внутри докера, то данные успешно мигрируются
источник
13:50пожаловаться#14

ЕГ

Евгений Глотов... in Data Engineers
В каком формате? Штабелями или в рядок?
источник
13:51пожаловаться#15

ЕГ

Евгений Глотов... in Data Engineers
[parquet vs csv]😆
источник
13:51пожаловаться#16

AK

Alex K in Data Engineers
))
источник
13:52пожаловаться#17

AK

Alex K in Data Engineers
щас попробую разобраться где исходные данные и как их получить
источник
13:52пожаловаться#18

AA

Artem Aliev in Data Engineers
spark-sql -e 'select 100 as percent of friends' ;)
источник
13:54пожаловаться#19

MK

Mikhail Kuznetsov in Data Engineers
sticker.webp
(18.29 Кб)
источник
13:57пожаловаться#20