В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Data Engineers

1724 membersпожаловаться на группу
2017 March 19

GP

Grigory Pomadchin in Data Engineers
https://github.com/mongodb/mongo-hadoop
GitHub
mongodb/mongo-hadoop
MongoDB Connector for Hadoop. Contribute to mongodb/mongo-hadoop development by creating an account on GitHub.
источник
23:45пожаловаться#1
2017 March 20

SZ

Sergey Zolotov in Data Engineers
через коннектор вроде оно быстро выгружает в bson, так что не должно быть с этим проблем
источник
11:10пожаловаться#2

λ

λoλdog in Data Engineers
Sergey Zolotov
через коннектор вроде оно быстро выгружает в bson, так что не должно быть с этим проблем
но не 100лямов
источник
11:17пожаловаться#3

AA

Akceptor AkceptorUA [🇺🇦, IF] in Data Engineers
Может кто-то помочь с Ambari UI? http://stackoverflow.com/questions/42906503/add-a-combo-box-for-custom-service-in-ambari-ui
Stackoverflow
Add a combo box for custom service in Ambari UI
I'm implementing a custom service that is configured via Ambari UI and I want to add property to specify Authentication tyupe that could be either LDAP or KERBEROS.
In my service-config.xml I have ...
источник
17:45пожаловаться#4
2017 March 22

GP

Grigory Pomadchin in Data Engineers
посоны а никто не зиповал / гзиповал директории на хдфс?

надо руками писать мр джобу? готового ничего нет?
источник
10:02пожаловаться#5

B

Boris in Data Engineers
Ну можно не МР, а что-то более высокоуровневое. Например в хайве создать таблицу со сжатым стором и переложить.
Или пигом.
источник
10:04пожаловаться#6

GP

Grigory Pomadchin in Data Engineers
да, это видел
источник
10:04пожаловаться#7

λ

λoλdog in Data Engineers
А у компрешин кодека ничего нет?
источник
10:05пожаловаться#8

GP

Grigory Pomadchin in Data Engineers
ну, по файлово можно им, думаю)
источник
10:07пожаловаться#9

B

Boris in Data Engineers
Пигом 3 строчки по идее.
источник
10:08пожаловаться#10

DS

Demidov Sergey in Data Engineers
Как вариант можно использовать HAR (Hadoop ARchives), пример команды sudo -u hdfs hadoop archive -archiveName files.har -p /user/spark -r3
источник
10:24пожаловаться#11

λ

λoλdog in Data Engineers
Grigory Pomadchin
ну, по файлово можно им, думаю)
Ну эт ж 3 строчки кода
источник
10:47пожаловаться#12

GP

Grigory Pomadchin in Data Engineers
да я наверное пофайлово и сделаю; у меня стрим байтов есть; очень удобно будет сразу гзиповано файл записать
источник
10:53пожаловаться#13

NK

ID:1373407 in Data Engineers
как вы логируете шелл скрипты запущенные в оззи?
источник
12:38пожаловаться#14
2017 April 03

PK

Pavel Klemenkov in Data Engineers
Дорогие друзья! Мы строили-строили и, наконец, построили. 27 апреля собираем практиков и энтузиастов Apache Spark у себя на Мансарде!
Расскажем, как перевели (почти) все наши ETL и ML пайплайны на Spark и как переехали на вторую версию. Познакомимся и пообщаемся! https://rambler-co-e-org.timepad.ru/event/470664/
rambler-co-e-org.timepad.ru
Apache Spark / События на TimePad.ru
Если регистрация на мероприятие закрыта, это значит, что свободных мест уже не осталось. Для тех, кто не сможет попасть на мероприятие или не успел зарегистрироваться, будет организована прямая трансляция в группе Мансарды Rambler&Co - https://www.facebook.com/afishamansarda
источник
14:19пожаловаться#15

NK

ID:1373407 in Data Engineers
спасибо
источник
14:33пожаловаться#16

NK

ID:1373407 in Data Engineers
Pavel Klemenkov
Дорогие друзья! Мы строили-строили и, наконец, построили. 27 апреля собираем практиков и энтузиастов Apache Spark у себя на Мансарде!
Расскажем, как перевели (почти) все наши ETL и ML пайплайны на Spark и как переехали на вторую версию. Познакомимся и пообщаемся! https://rambler-co-e-org.timepad.ru/event/470664/
rambler-co-e-org.timepad.ru
Apache Spark / События на TimePad.ru
Если регистрация на мероприятие закрыта, это значит, что свободных мест уже не осталось. Для тех, кто не сможет попасть на мероприятие или не успел зарегистрироваться, будет организована прямая трансляция в группе Мансарды Rambler&Co - https://www.facebook.com/afishamansarda
в скала ру сделайте)
источник
15:34пожаловаться#17

🔝P

🔝Ivan Popovich 🔝 in Data Engineers
ID:1373407
в скала ру сделайте)
done
источник
15:38пожаловаться#18

PK

Pavel Klemenkov in Data Engineers
👍
источник
15:38пожаловаться#19
2017 April 10

NK

ID:1373407 in Data Engineers
Кто-нибудь занимался обновлением broadcast values  в стриминге апачевском, есть какие-нибудь библиотеки ?
источник
14:27пожаловаться#20