С таким же успехов бизнесс берет мультитул прогера на бэк+фронт. Ничего особенного.
Частл задачь, очевидно выйдет в библиотеки, но библиотеки задачу бизнесса все-равно решать не будут. Прогер с либами буднт обязан хотя бы иметь базовый набор навыков, чтобы мыслить из вне коробки и т.п.

А какие навыки DS сейчас нельзя автоматизировать?

например, сократить время поиска решения с пары месяцев перебора до одного дня

Ну это да, всё упирается в мощности.. Но лет через 10 наверное и мощности будут другие)

тезис сомнителен все же. Железо в потолке почти, датацентр вы себе не купите и не арендуете, ждать квантов - для любителей ждать.
Также очевидно, что, если есть сподвижки в точностях != вы автоматизируете все

Ну в 2010 тоже говорили, что железо в потолке.. Однако во сколько раз увеличилась мощность RTX 3080 по сравнению с GTX 480 (2010 год).. конечно это не тысячи раз, но раз в 10-15 судя по бенчмаркам + тензорные ядра ещё в 10 раз дают ускорение, итого в 100-150 раз за 10 лет.. Плюс сами алгоритмы совершенствуются, появляются новые более быстрые архитектуры

Ну да, и нвидия по факту сняла с производства лучшие карточки и стала масштабироваться по площади на кристале. Раньше масштабирование было в "размер". Такая же история с процессорамт, но там еще выкручиваются

Моц процессор 2010 года ничуть не хреновее того, что можно купить сейчас за 10-20к, например

Сейчас надежда на "оптонику", btw (не оптоэлектронику)

а в чем различие оптоники и оптоэлектроники?

В том, что только оптика и оптика+электроника

Хотя, наверно, лучше быть реалистом и обозначить оптоэлектронику, как надежду, оптоника до 2000х непаханное поле практически было. Сейчас вроде немножко нейроночки гоняют уже в узком круге задач.
Ладно, я прекращаю офтопить

☄️Big Data - уже не хайп, а прогрессирующая индустрия. Большие данные используются практически в каждом бизнесе, требуя соответствующих навыков не только от дата сайентистов, но и разработчиков, аналитиков, менеджеров по развитию продукта и руководителей проектов.

Хорошие новости, друзья!

Уже 16 марта В NewProLab стартует флагманский 12-недельный онлайн-курс "Специалист по большим данным"
👉🏻Успейте подать заявку: https://clck.ru/TayDZ

Без преувеличения - это самая хардкорная и обширная программа на рынке Big Data.

👉🏻Вас ждет 36 практических занятий, 10 лаб, подготовка 2 собственных проектов и всё это на реальных дата-сетах и живых кейсах от команды преподавателей-практиков.

Вы научитесь строить модели машинного обучения, писать MapReduce-джобы, используя Hadoop Streaming и Python, готовить SQL-like запросы в Hive, работать с данными на HDFS, проводить анализ при помощи Apache Spark, а также строить алгоритмы рекомендательных систем.

P.S. Нужно подтянуть отдельный модуль? Программу можно пройти частями. Оставляйте заявку.

может мне кто-то работающий с tensorflow-ом объяснить что за сатану под названием tf-nightly-gpu они ежедневно выпускают ?

нашел одну статью с кодом, код написан под конкретное колесо этого ночного ТФ,
пока собрал нужную куду и пакеты.
Хотел свой код запустить, а там дофига классов нет и много прочего, что в обычном релизе есть.

Задумался, это я чего-то недопонимаю, или так специально автор писал, чтобы чисто для статьи "демо" было,
а полными возможностями всей задумки дальше никто не мог воспользоваться толком.

у ТФ там свои аномалии, поэтому общее описание далёко от тех, кто делает ночные тф 😂

да нет это буквально сборка мастера

там структура файлов абсолютна иная. По идеи ты бы ожидал, чтобы ночная была компатабильна обычного релиза той же версии, а у них не так.

nightly это не релиз и не версия, просто по расписанию собрали то что было для тестов и все.