Size: a a a

2020 January 12

DZ

Dmitry Zuev in Data Engineers
David Manukian
@zuynew Ок,  спасибо
источник

DZ

Dmitry Zuev in Data Engineers
что то такое
источник

DZ

Dmitry Zuev in Data Engineers
нужно красивши переписать
источник

DM

David Manukian in Data Engineers
@zuynew спасибо)
источник

D

Dmitry in Data Engineers
Aaron
Друзья, есть какой-то комплексный курс или книга по стеку Hadoop + Python + A/B тесты? Посоветуйте, пожалуйста. Хочу изучить.
Шарден Б., Массарон Л., Боскетти А. - Крупномасштабное машинное обучение вместе с Python - 2018
недавно видел на рутрекере валялось. spark+hadoop есть пару глав
источник

A4

Anon 43 in Data Engineers
combiner запускается на той-же ноде что и mapper?
источник

AC

Alexander Chermenin in Data Engineers
Anon 43
combiner запускается на той-же ноде что и mapper?
Да
источник
2020 January 13

MB

Mikhail Butalin in Data Engineers
Ктонибудь заморачивался на предмет целесообразности запуска numad на многоголовых нодах?
Целесообразность итп.
Мб у кого-то уже работает это?
источник

PG

Paul Golubev in Data Engineers
Кто-то уже работал с sas viya? Что за зверь, только замена устаревших систем? По описанию какой-то монстр, который заменяет всю бигдату кроме hdfs
источник

YS

Ya SA in Data Engineers
Paul Golubev
Кто-то уже работал с sas viya? Что за зверь, только замена устаревших систем? По описанию какой-то монстр, который заменяет всю бигдату кроме hdfs
это ад)
источник

PG

Paul Golubev in Data Engineers
Ya SA
это ад)
Давай мякотку - есть подробности, что там наиболее ад?)
источник

YS

Ya SA in Data Engineers
да это скорее крик души)меня в большинстве касается администрирование и настройка-а там нужен опыт. но это sas - так что поддержка помогает.
ну а ребята кто код пишут тоже жалуются что не всегда получают то, что нужно.  говорят какие-то проблемы с random forest были, питон на одной машине с 30Гб справился, а  viya съела 90Гб и померла
источник

PG

Paul Golubev in Data Engineers
А, стандартная проблема сас. Понял, спасибо)
источник

R

Renarde in Data Engineers
Всем привет!
Вопросик по коннекту из Spark в Oracle. настроили импорт одного небольшого словарика через jdbc, в целом все работает норм, но время от времени запрос падает с вот такой ошибкой:

ORA-12514, TNS:listener does not currently know of service requested in connect descriptor


Есть идеи как это победить? Чтение документации как-то не особо помогло, советуют просто делать реконнект время-от-времени
источник

JS

Jury Sergeev in Data Engineers
всем доброго вечера, можете помочь? работаю с Cassandra через JDBC, все хорошо, не никак не нагуглю, как указать размер таймаута на получение данных, может знает кто, как параметр называется для драйвера?
источник

N

Nikolay in Data Engineers
Renarde
Всем привет!
Вопросик по коннекту из Spark в Oracle. настроили импорт одного небольшого словарика через jdbc, в целом все работает норм, но время от времени запрос падает с вот такой ошибкой:

ORA-12514, TNS:listener does not currently know of service requested in connect descriptor


Есть идеи как это победить? Чтение документации как-то не особо помогло, советуют просто делать реконнект время-от-времени
Странно , что падает не все время. Вы посмотрите на строку соединения . Какой сервис вы там указываете . Проверте сервис живой или нет, но должен быть норм, если он работает
источник

N

Nikita Blagodarnyy in Data Engineers
Renarde
Всем привет!
Вопросик по коннекту из Spark в Oracle. настроили импорт одного небольшого словарика через jdbc, в целом все работает норм, но время от времени запрос падает с вот такой ошибкой:

ORA-12514, TNS:listener does not currently know of service requested in connect descriptor


Есть идеи как это победить? Чтение документации как-то не особо помогло, советуют просто делать реконнект время-от-времени
Это скорее всего проблема сервера, а не клиента.
источник

N

Nikita Blagodarnyy in Data Engineers
Есть возможность на оракле локальный sqlplus дернуть с аналогичными параметрами подключения?
источник

N

Nikita Blagodarnyy in Data Engineers
sqlplus user/password@service [as sysdba] ?
источник

N

Nikita Blagodarnyy in Data Engineers
в оракле процесс листенера живет отдельно от экземпляра
источник