Size: a a a

Инжиниринг Данных

2021 March 16
Инжиниринг Данных
А это если всерьез решите AI изучать)))
источник
Инжиниринг Данных
🔥 Квантовый Компьютер. Как устроен? Как программировать? Уже?

Сегодня будущее заглянет в наш в дом так глубоко, что в конце поста мы даже напишем свой первый квантовый Hello World и запустим его на настоящем квантовом компьютере.

Кажется, пост получился очень логически красивым и объясняет тему чуть лучше обычных статей в интернете (научрук поста подтверждает!)

Порепостите, пожалуйста. Вдруг кому-то такое всё еще интереснее комнат в клабхаусе :D

https://vas3k.ru/blog/quantum_computing/
источник
Инжиниринг Данных
Переслано от Mikhail Kumachev
DE or DIE #6

Друзья, мы рады анонсировать митап #6 нашего сообщества DE or DIE!

Дата и время: 25 марта (четверг) 18:00
Формат: Онлайн (трансляция на YouTube)

Регистрация по ссылке: https://deordie.timepad.ru/event/1584420/

Наши спикеры:
1. Иван Трусов из Databricks с докладом: Delta Lake — table format for large scale storage and analytics
2. Паша Финкельштейн из JetBrains с докладом: Kotlin for Apache Spark: WHY?

(*): Несмотря на англоязычные названия доклады будут на русском языке.

Ждем вас в следующий четверг. Ссылку на трансляцию опубликуем за час до мероприятия.
источник
Инжиниринг Данных
Хороший пост про ценность "бесплатных стажировок" в хорошей компании.
источник
2021 March 17
Инжиниринг Данных
Не забудьте про наше вебинар в 7 вечера по Москве про Яндекс Облако. https://youtu.be/_PhGm2PrQmY
источник
Инжиниринг Данных
Яндекс продолжает набор на оплачиваемую летнюю стажировку⚡️

Важно: отлично проявившие себя стажеры получат шанс перейти в штат!

Направления: фронтенд- и бэкенд-разработка, машинное обучение, аналитика, мобильная разработка и другие — ознакомиться с ними можно здесь.
Особый формат стажировки — Deep Dive в Яндекс.Маркете.

Сколько длится: от трех до 6 месяцев.

Где: в Москве, Санкт-Петербурге, Екатеринбурге, Нижнем Новгороде, Новосибирске, Сочи, Симферополе и Минске.
Если вы из другого города — мы оплатим вам дорогу и проживание в Москве 🙌

Что нужно уметь: мы ждём отличного знания базовых алгоритмов и уверенных навыков программирования на одном из языков.

Как проходит отбор: зависит от направления, но в большинстве случаев нужно будет выполнить тестовое задание, пройти два-три технических интервью, а затем выбрать команду.

Подавайте заявку до 31 мая: https://clck.ru/TgiBN

PS ребята поддержали #vsevsevmeste🤞
источник
Инжиниринг Данных
Мы начали переходите :
https://youtu.be/_PhGm2PrQmY
источник
Инжиниринг Данных
Ребята очень прониклись книгой Working Backwards и буквально пересказывают главы. Все рекомендую данную книга, так как там реально раскрыты принципы измерения бизнеса и принятия решений на основе данные. А вот краткий пересказ одной из глав.
источник
2021 March 18
Инжиниринг Данных
Классный курс на Coursera
источник
Инжиниринг Данных
🔥 Друзья у меня для вас огненная вакансия в компанию Работа.ру (СБЕР)

📈 Аналитик продаж в Работа.ру
Чем предстоит заниматься:
Решением задач в области аналитики продаж с фокусом на рост эффективности операционной деятельности департамента продаж, оптимизацию привлечения работодателей, увеличение выручки, повышение LTV работодателей:
- развитием системы отчетности по эффективности департамента продаж;
- выявлением потребностей заказчиков в аналитической информации и развитием системы self-service data для департамента продаж;
- поиском инсайтов в данных в целях развития продаж, формированием гипотез для повышения выручки и снижения оттока;
- анализом основных тенденций на рынке труда, конкурентов и бенчмарков;
- подготовкой аналитической информации для заказчиков-работодателей по рынку труда.

Инструменты, которые будете использовать:
💎SQL
💎Tableau
💎ClickHouse
💎Python

Описание вакансии и откликнуться на сайте

От себя добавлю что там крутая команда и руководитель )))
источник
2021 March 19
Инжиниринг Данных
The Feedback Loops in Data that Will Change SaaS Architecture https://www.linkedin.com/pulse/feedback-loops-data-change-saas-architecture-tomasz-tunguz/
источник
Инжиниринг Данных
Еще один BI продукт был приобретен. На этот раз облачный BI - Chartio. Я его упомянул в модуле 3 про Fancy BI. Это был один из первых облачных BI для облачного DW Redshift. https://techcrunch.com/2021/02/26/atlassian-is-acquiring-chartio-to-bring-data-visualization-to-the-platform/?guccounter=1
источник
Инжиниринг Данных
Strelka Mag запускает третью школу дата-журналистики! Записаться на курс можно до пятого апреля.

Вместе с ведущими дата-журналистами России Андреем Дорожным, Дадой Линделл и Александром Богачёвым вас научат собирать данные, обрабатывать их и превращать в интересные истории.

В этом году школа проходит в двух форматах: есть онлайн-вебинары, а ещё можно прослушать их и поучаствовать в создании дата-проекта на «Стрелке» вместе с кураторами школы. Ищите всю подробную информацию по ссылке.
источник
2021 March 20
Инжиниринг Данных
источник
Инжиниринг Данных
источник
Инжиниринг Данных
Переслано от George Vinogradov
Дима привет,

Ищу себе в команду BI аналитика. Думаю, что в сообществе может быть кому-то интересно.
Описание ниже:

Друзья привет, в команду Data Management в Novartis ищу BI аналитика (middle), которому предстоит развивать data-driven подход к принятию решений в компании, анализировать очень разные данные: начиная с продаж, заканчивая digital активностями и hr аналитикой.

Что по стеку: excel (куда без него), sql, alteryx, qliksense, python (nice-to-have)
+ английский на уровне - могу рассказать о своем исследовании.

Подробное описание вакансии и ссылка чтобы откликнуться в notion.
https://www.notion.so/We-are-hiring-BI-Analyst-d87cae78ee914fbc8db630f607650b75
источник
Инжиниринг Данных
Дима, привет!

Я в SberDevices развиваю систему управления корпоративными данным. Ищу к себе в команду дата-инженера. Основные задачи: разработка процедур загрузки данных из различных источников, последующего их преобразования и распространения.

Подробное описание вакансии прикладываю.
источник
Инжиниринг Данных
источник
2021 March 21
Инжиниринг Данных
@channel Всем привет💡. Anatolii Balakiriev  закончил создание видеокурса по SQL для начинающих. Это самый детальный курс для новичков.

Вот его сообщение:

Для меня это интересный опыт объяснить материал простыми словами.

Курс рассчитан на тех, кто ранее никогда не работал с базами данных и может стать дополнением к второму модулю курса Getting start with Data Engineering and Analytics
От простого к сложному 🚀
Домашних заданий не предусмотрено поскольку все примеры задач разбираются на уроке и все необходимые файлы будут прикрепляться к каждому уроку.
Курс состоит из 3 модулей (уровней) 📜, каждый модуль состоит из 10 видеоуроков:collision:. Каждый день, в этом канале, буду добавлять по одному уроку

Первый уровень курса уже доступен, переходите по ссылке:
https://github.com/Data-Learn/SQL-for-beginners/blob/main/SQL-101%20Guide.md

Полный список тем, который будут разбираться в видеокурсе:

1⃣ Уровень:
1. Первое знакомство с базами данных
2. pgAdmin, SELECT  и арифметические операции
3. Установка PostgreSQL с pgAdmin себе на компьютер
4. Выборка данных из таблиц, уникальные значения и комментарии
5. Сортировка данных, форматирование кода и ограничение выборки
6. Операторы сравнения. Практика
7. Фильтрация данных с помощью оператора WHERE, оператор BETWEEN,  логические операторы NOT, AND, OR
8. NULL значения и агрегатные функции
9. Группировка значений с помощью GROUP BY, оператор IN
10. Фильтрация агрегируемых данных с помощью HAVING и логический порядок обработки инструкций
Уровень 1. Практика

2⃣ Уровень:
11. Схема данных и руководство по стилю SQL
12. Соединения таблиц, виды соединений, синтаксис
13. Внутреннее соединение (INNER) JOIN
14. Внешнее соединение LEFT JOIN
15. Внешние соединения RIGHT JOIN и FULL JOIN. Первичные (PRIMARY) и внешние (FOREIGN) ключи
16. Перекрестное соединение CROSS JOIN
17. Объединение строк с помощью UNION и UNION ALL. Введение в подзапросы
18. Операторы EXCEPT и INTERSECT, использование USING вместо ON
19. Использование операторов LIKE и CASE, функции для работы с датой и временем, функции для работы со строками
20. Подзапросы (вложенные запросы) и общие табличные выражения (Common Table Expressions, CTE)
Уровень 2. Практика

3⃣ Уровень:
21. Оконные функции в PostgreSQL, так ли они страшны как о них говорят
22. Есть ли жизнь после PostgreSQL
23. Установка Microsoft SQL Server и импорт базы данных AdventureWorks
24. Структура SQL (DDL, DQL, DML, DCL, TCL). Работа с таблицами - создание, наполнение её данными, изменение, удаление
25. Типы данных, оператор TOP. Назад в будущее - вспомним всё
26. Ограничения SQL, ключи. Практика по созданию таблиц и их изменению. Вспоминаем оконные функции. Функции для работы с датами и строками
27. Синонимы. TOP и OFFSET-FETCH фильтры. Табличные операторы APPLY, PIVOT, UNPIVOT. Подзапросы. Рекурсивные CTE. CASE с переменными
28. Представления. Триггеры. Групповые функции
29. Хранимые процедуры. Вычисляемые столбцы. Пользовательские функции. Транзакции и обработка ошибок
30. Планы выполнения запросов. Физические соединения (nested loops, merge joins, hash joins). Индексы
Уровень 3. Завершение курса
https://github.com/Data-Learn/SQL-for-beginners/blob/main/SQL-101%20Guide.md

Полный список тем, который будут разбираться в видеокурсе:

1⃣ Уровень:
1. Первое знакомство с базами данных
2. pgAdmin, SELECT  и арифметические операции
3. Установка PostgreSQL с pgAdmin себе на компьютер
4. Выборка данных из таблиц, уникальные значения и комментарии
5. Сортировка данных, форматирование кода и ограничение выборки
6. Операторы сравнения. Практика
7. Фильтрация данных с помощью оператора WHERE, оператор BETWEEN,  логические операторы NOT, AND, OR
8. NULL значения и агрегатные функции
9. Группировка значений с помощью GROUP BY, оператор IN
10. Фильтрация агрегируемых данных с помощью HAVING и логический порядок обработки инструкций
Уровень 1. Практика

2⃣ Уровень:
11. Схема данных и руководство по стилю SQL
12. Соединения таблиц, виды соединений, синтаксис
13. Внутреннее соединение (INNER) JOIN
14. Внешнее соединение LEFT JOIN
15. Внешние соединения RIGHT JOIN и FULL JOIN. Первичные (PRIMARY) и внешние (FOREIGN) ключи
16. Перекрестное соединение CROSS JOIN
17. Объединение строк с помощью UNION и UNION ALL. Введение в подзапросы
18. Операторы EXCEPT и INTERSECT, использование USING вместо ON
19. Использование операторов LIKE и CASE, функции для работы с датой и временем, функции для работы со строками
20. Подзапросы (вложенные запросы) и общие табличные выражения (Common Table Expressions, CTE)
Уровень 2. Практика

3⃣ Уровень:
21. Оконные функции в PostgreSQL, так ли они страшны как о них говорят
22. Есть ли жизнь после PostgreSQL
23. Установка Microsoft SQL Server и импорт базы данных AdventureWorks
24. Структура SQL (DDL, DQL, DML, DCL, TCL). Работа с таблицами - создание, наполнение её данными, изменение, удаление
25. Типы данных, оператор TOP. Назад в будущее - вспомним всё
26. Ограничения SQL, ключи. Практика по созданию таблиц и их изменению. Вспоминаем оконные функции. Функции для работы с датами и строками
27. Синонимы. TOP и OFFSET-FETCH фильтры. Табличные операторы APPLY, PIVOT, UNPIVOT. Подзапросы. Рекурсивные CTE. CASE с переменными
28. Представления. Триггеры. Групповые функции
29. Хранимые процедуры. Вычисляемые столбцы. Пользовательские функции. Транзакции и обработка ошибок
30. Планы выполнения запросов. Физические соединения (nested loops, merge joins, hash joins). Индексы
Уровень 3. Завершение курса

https://youtu.be/ri__OyFKluA
источник
2021 March 22
Инжиниринг Данных
Better Data Culture:
- Data as Code
- Data is Owned
- Data Quality is Known for each dataset.
- Accelerate data productivity with data tools optimized for collaboration.
- Organize the data with local data ownership

https://eng.uber.com/ubers-journey-toward-better-data-culture-from-first-principles/
источник