Size: a a a

Инжиниринг Данных

2021 July 14
Инжиниринг Данных
Отлично расписали все возможности лицензий power bi https://www.csgpro.com/blog/the-ultimate-power-bi-licensing-guide/
источник
Инжиниринг Данных
Автор сравниваю стоимость лицензии разных BI инструментов. https://crackerzin.com/bi-tools-license-comparisons/
источник
2021 July 15
Инжиниринг Данных
По-моему это что-то крутое, но ещё не пробовал, хотя все чаще вижу в сети последние 2 дня, про то как git помогает писать код лучше и быстрей. Кто пробовал?

Можно будет теперь все interview на раз два проходить))
источник
Инжиниринг Данных
Мы тут часто обсуждали Snowflake и его акции, а они сегодня такие же как и год назад. Они так хотели разогнать стоимость IPO что совсем забыли о самом продукте и его ценности.
источник
Инжиниринг Данных
через 5 минут начинаем
https://youtu.be/2Z325XKRpfw
YouTube
Разбор сервисов Google Cloud для построения аналитических решений / Денис Соловьев
🔔 План:
📌 Разберём/вспомним Cloud Service Models
📌 Разберём группу сервисов Compute
📌 Разберём группу Storage и Databases
📌 Рассмотрим сервисы для Big Data решений
📌 Рассмотрим сервисы для CI/CD
📌 Рассмотрим другие полезные сервисы Google Cloud
📌 Посмотрим на примеры аналитических архитектур на Google Cloud

🔥 У Дениса есть свой канал, где он рассказывает очень крутые штуки, описывает кейсы и дает крутые материалы по инжнирингу данных...

🔗 Ссылка на его ТГ: https://t.me/smart_data_channel

🔔 Подписывайтесь на канал "Datalearn" чтобы не пропустить новые видео и ставьте лайки!

📕 Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
🔗 Записаться вы можете на нашем портале https://datalearn.ru/

👍🏻 Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания, отдавать их на проверку и получить сертификат прохождения курса.
источник
2021 July 16
Инжиниринг Данных
Herman Miller делает лучшие стулья! На канале мы про них говорили. А вот небольшой press release, что они используют для data stack - Astronomer (коммерческий Airflow), Snowflake  https://www.astronomer.io/blog/herman-miller-case-study
источник
Инжиниринг Данных
источник
Инжиниринг Данных
Еще один хороший кейс AI - в Белгии все заседания политиков стриятся в ютуб, с помощью модели и ПО можно смотреть, сколько политиков откликаются на телефон

'The Flemish Scrollers' is software automatically tagging distracted Belgian politicians when they use their phone on the daily live streams. https://driesdepoorter.be/theflemishscrollers/
источник
Инжиниринг Данных
Заключительное видео по модулю 5 - Python в Облаке AWS на базе AWS Python Workshop. Так же Сергей перевел весь воркшоп на русский, я сам его прошел и остался очень довольный, все как мы любим - от простого к сложному.

Python является самым популярным языком программирования и используются абсолютно для любых задач. В будующих модулях 07. Spark, 08. Big Data и 09. Data Lake мы начнем использовать Python для аналитики, трансформации и инжиниринга данных, поэтому мы решили вв конце модуля про облычные вычисления провести Workshop по Python на AWS. Воркшоп доступен на английском и русском языках.  Из него вы на парктики узнаете основы работы с Python:

📌   Переменные
📌   Типы данных
📌   Пакеты
📌   Функции
📌   Аргументы и параметры
📌   Циклы и Условия
📌   Логирование и Ошибки
📌   Python библиотека boto3 для работы с AWS
📌   Cloud9 - AWS IDE

Модуль 5 оффициально окончен. Все материалы по нему - в git, включая сертификат для linkedin и значок открытка для социальных сетей.

Далее я начну модуль 6, а Рома портирует модуль про облачные вычисления как отдельный самостоятельный курс на степик. Мы явно опережаем время с облаками, но это был важный элемент в современной аналитике.
YouTube
DATALEARN | DE - 101 | МОДУЛЬ 5-10 PYTHON В ОБЛАКЕ
Python является самым популярным языком программирования и используются абсолютно для любых задач. В будующих модулях 07. Spark, 08. Big Data и 09. Data Lake мы начнем использовать Python для аналитики, трансформации и инжиниринга данных, поэтому мы решили вв конце модуля про облычные вычисления провести Workshop по Python на AWS. Воркшоп доступен на английском и русском языках.  Из него вы на парктики узнаете основы работы с Python:

📌   Переменные
📌   Типы данных
📌   Пакеты
📌   Функции
📌   Аргументы и параметры
📌   Циклы и Условия
📌   Логирование и Ошибки
📌   Python библиотека boto3 для работы с AWS

Вы рассмотрите основной функционал Python с помощью облачной AWS IDE Cloud9 и с использованием сервиса Amazon Translate.

В 5 модуле мы узнаем про облачные вычисления, или просто cloud computing. Мы начнем с основ, и поговорим и главных вендорах и их решениях. Я расскажу про свой опыт с облачными решениями и постараюсь вас научить их использовать и дать достаточно знаний, для того, чтобы вы могли понимать, что…
источник
Инжиниринг Данных
Интересный пример, мужик решился вдохновиться историей успеха другого мужика и за 1,5 года упороться в java. И потом написал развернутый ответ как он ненавидит этого человека и что все его советы лажа
источник
Инжиниринг Данных
Вчера провёл вебинар для Data Learn, где подробно разобрали сервисы Google Cloud и в каких кейсах их можно применять. Получилась целая лекция о Cloud Computing)

Презентация с выступления: https://docs.google.com/presentation/d/141TXFvCSl7tYaw1ODzYdlDxcWLJsHMM0roCj0YbbfYc/edit?usp=sharing

Полезные ссылки, которыми просили поделиться после вебинара:

Решение на GitHub для стриминга данных Google Analytics на базе App Engine и Google BigQuery (решение опубликовано давно и использует Python 2, поэтому при использовании его нужно будет обновить и причесать)

Пример того, как захостить ваш R-скрипт на Cloud Run
YouTube
Разбор сервисов Google Cloud для построения аналитических решений / Денис Соловьев
🔔 План:
📌 Разберём/вспомним Cloud Service Models
📌 Разберём группу сервисов Compute
📌 Разберём группу Storage и Databases
📌 Рассмотрим сервисы для Big Data решений
📌 Рассмотрим сервисы для CI/CD
📌 Рассмотрим другие полезные сервисы Google Cloud
📌 Посмотрим на примеры аналитических архитектур на Google Cloud

🔥 У Дениса есть свой канал, где он рассказывает очень крутые штуки, описывает кейсы и дает крутые материалы по инжнирингу данных...

🔗 Ссылка на его ТГ: https://t.me/smart_data_channel

🔔 Подписывайтесь на канал "Datalearn" чтобы не пропустить новые видео и ставьте лайки!

📕 Записывайтесь и проходите курс Инженера Данных.
⚠️ КУРС БЕСПЛАТНЫЙ!
🔗 Записаться вы можете на нашем портале https://datalearn.ru/

👍🏻 Запись на курс даст вам возможность не только просматривать видео, но и получить доступ к закрытым материалам, а также возможность выполнять домашние задания, отдавать их на проверку и получить сертификат прохождения курса.
источник
Инжиниринг Данных
На этой неделе Netflix взял на работу Mike Verdu на позицию vice president of game development. Нетфликс лидер в видео стриминге и подписке и теперь они хотят двигаться в gaming.

The idea is to offer video games on Netflix’s streaming platform within the next year, according to a person familiar with the situation.

Недавно я заметил интересный формат мультиков - интерактивные. Дети смотрели сериал Minecraft и там зрителю дают возможность выбрать сценарий (один из двух возможных), очень необычный формат и детям очень понравилось.

В автороской заметке The Information, автор пишет совсем смелые мысли:
Here’s one idea that might jumpstart Netflix in the market: It could buy a well-established gaming business, perhaps Microsoft’s. That would give Netflix a portfolio of gaming studios—including Bethesda, which Microsoft recently acquired—that would give Netflix an edge in original game production, in addition to Microsoft’s nascent Game Pass subscription service. Microsoft might be happy to unload the business in exchange for a stake in Netflix, particularly if it kept the cloud business and captured Netflix’s cloud business from AWS. The only fly in the ointment might be Microsoft’s Xbox hardware business, which we now know is a money-loser. Maybe Netflix could sell that to Roku, which knows how to translate low-margin hardware into a robust business.

Не думаю, что это случится, так как у Microsoft все хорошо с Gaming и сервисом game pass. А то что консоли продаются в убыток это ивестный факт, главное продать подписку, так же и с Amazon Alexa и другими гаджетами. Тем более, консоли уже и не нужны, чтобы играть, благодаря сервисам стриминга можного играть полноценно через streaming app.

Факт остается фактом - gaming развивается и все больше людей готовы платить за это, ну значит и работы в game индустрии будет больше и будет нужно делать больше аналитики. Я так то рад, если Netflix будет делать игры, так как у них самые высокие зарплаты))

PS А вот свежее исследование рынка игр by Accenture:
Gaming has always been a social experience, but never more so than it is today. Accenture surveyed 4,000 gamers and made in-depth interviews with industry leaders from game developers and platforms. Learn what gamers want today and how can gaming companies up their game here.
источник
2021 July 17
Инжиниринг Данных
Компания Dbt Labs анонсировала - The Foundry Program:

What exactly is the Foundry Program?
It is a 6-month program designed to give:
- aspiring software engineers training and experience in writing code in production at a software company, and
- aspiring analytics engineers experience working with the modern data stack including, of course, dbt.


Классный метод продвижения продукта и его внедрения в массы. Уверен будет интересный контент, вы можете попробовать записаться, не знаю как у них там по географии и по лимитам. Они ищут новичков.
источник
Инжиниринг Данных
Теперь вы можете увидеть все каналы в одном месте - Ребята из @it_resume собрали большую подборку авторских телеграмм-каналов для аналитиков. Там более 20 каналов на любой вкус - анализ данных, программирование, data engineering, data science и многое другое 👍  
 
Теперь вам точно будет, что почитать на предстоящих выходных 🙃  
Подробнее - в статье
источник
2021 July 18
Инжиниринг Данных
Создание дата команды в стартапе https://erikbern.com/2021/07/07/the-data-team-a-short-story.html
источник
Инжиниринг Данных
Уже завтра Виктория Олейник, расскажет о работе в Quantum Black(это дочка McKinsey с фокусом на DE и DS, это самая моя любимая компания вместе с McKinsey) и McKinsey в своем докладе Pipelines and Deadlines. Виктория закончила Высшую Школу Экономики и у нее крутой опыт работы в топовых консалтинг компаниях! Готовьте свои вопросы и не пропустите ивент!

https://youtu.be/v1CR4GotN-w
источник
2021 July 19
Инжиниринг Данных
источник
Инжиниринг Данных
Dremio будет проводить панель по озерам данных с топовыми спикерами онлайн https://www.dremio.com/subsurface/live?_ga=2.203573072.1949877702.1626636985-1007574036.1626636985
источник
2021 July 20
Инжиниринг Данных
источник
Инжиниринг Данных
источник