Телеграмм чат группы hadoopusers страница 1623

В целом, с SQL работаю около 2-х лет, но это опыт исключительно с одной СУБД, так вышло=)

11:38пожаловаться #1

AZ

Позиция будет Data Engineer (с учётом обучения)

Ранее писал отчёты, сейчас, на текущем месте - проектирование БД, её наполнение, триггеры, хранимые процедуры, оптимизация через рефакторинг и план выполнения

прочитайте вот это https://docs.teradata.com/reader/xrmOxQlXa0ETFi5lPxHJaQ/uiY4wJQifXw_Z8ih87eQLw

11:40пожаловаться #2

DB

Anton Zadorozhniy

прочитайте вот это https://docs.teradata.com/reader/xrmOxQlXa0ETFi5lPxHJaQ/uiY4wJQifXw_Z8ih87eQLw

Спасибо, сегодня начну
А что могли бы ещё посоветовать для начала? Понятно, что на новом месте будут учить, но всё же

11:41пожаловаться #3

AZ

Спасибо, сегодня начну
А что могли бы ещё посоветовать для начала? Понятно, что на новом месте будут учить, но всё же

уверен что вам все расскажут, а перед новой работой лучше всего отдохнуть :)

11:41пожаловаться #4

DB

Anton Zadorozhniy

уверен что вам все расскажут, а перед новой работой лучше всего отдохнуть :)

Стандартное волнение перед новой работой никуда не денется, поэтому и начал задавать такие вопросы

Спасибо большое, отдохнуть и правда не помешает:)

11:42пожаловаться #5

AZ

Стандартное волнение перед новой работой никуда не денется, поэтому и начал задавать такие вопросы

Спасибо большое, отдохнуть и правда не помешает:)

могу сказать что это обычная РСУБД, особенности вы врядли детально сможете обозреть за ограниченное время, а у вашего нового работодателя наверняка есть какой-то онбординг на эту тему, я бы доверился ему)

11:45пожаловаться #6

DB

Я думал вообще просто освежить память об алгоритмах и их оптимизации, на больших данных может пригодиться, нет?:)
Кстати, можете посоветовать и по этой теме что-то?

11:46пожаловаться #7

M

Мне кажется просто погуглите общую информацию на тему терадаты

11:47пожаловаться #8

M

и общие подходы в бигдате

11:47пожаловаться #9

M

всё равно без конкретной цели сильно не втянешься

11:47пожаловаться #10

M

особенно когда понятия не имеешь какие будут конкретные цели

11:48пожаловаться #11

DB

Полагаю, я ещё вернусь с конкретными вопросами через пару недель:D

11:48пожаловаться #12

AZ

Я думал вообще просто освежить память об алгоритмах и их оптимизации, на больших данных может пригодиться, нет?:)
Кстати, можете посоветовать и по этой теме что-то?

что-то специальное про ТД я не смогу порекомендовать, это очень обычная СУБД на мой вкус (таких много то есть), различия там в деталях, а так просто популярные теперь книжки не будут вредными, вроде DDIA

11:48пожаловаться #13

DB

Понял
Всем спасибо огромное, потом ещё приду с вопросами по конкретике)

11:49пожаловаться #14

N

Nikita Blagodarnyy in Data Engineers

Понял
Всем спасибо огромное, потом ещё приду с вопросами по конкретике)

Почитайте общие сведения о технологиях Massive Parallel Processing, Driver/Executor, парадигмах Shared Nothing/Shared Everithing. Что такое amp, что такое map join, что такое data skew, что такое грязные чтения.

12:08пожаловаться #15

N

Nikita Blagodarnyy in Data Engineers

У меня с курсов по SQL/physical design версии осталось килограмм 15 студент гайдов, я свято верю, что когда-нибудь на досуге прочитаю их целиком. Если Вы из Питера-берите почитать :)

12:10пожаловаться #16

DB

Nikita Blagodarnyy

У меня с курсов по SQL/physical design версии осталось килограмм 15 студент гайдов, я свято верю, что когда-нибудь на досуге прочитаю их целиком. Если Вы из Питера-берите почитать :)

К сожалению, Москва)
Но, если есть в файловом варианте - с удовольствием бы зачитался)

12:25пожаловаться #17

IL

Ivan Levitsky in Data Engineers

Добрый день, коллеги
Подскажите пожалуйста
Я правильно понимаю, что на датанодах хадупа, нагрузка на дисковую подсистему в основном это последовательное чтение\запись и мало случайного чтения\записи?

12:32пожаловаться #18

UD

Uncel Duk in Data Engineers

Ivan Levitsky

Добрый день, коллеги
Подскажите пожалуйста
Я правильно понимаю, что на датанодах хадупа, нагрузка на дисковую подсистему в основном это последовательное чтение\запись и мало случайного чтения\записи?

пока кто-то не шафлится

12:48пожаловаться #19

UD

Uncel Duk in Data Engineers

sticker.webp

(3.07 Кб)