Ребят, а где найти фрилансовые площадки для data science ?

Как проверить могучесть клиппера?

Клепать посильнее и посмотреть на результат, например. Может там градиенты множатся на 0.99 в качестве "клиппинга"

Поставил каунтер на колличество батчей и с определенного момента чисто начинает расти. Так что это все-таки градиентный взрыв

Я пробовал clip_value как гиперепараметр оптимизировать оптуной, но пока он либо отсекает почти все и моделька не обучается либо просто не работает

Начать с проверки в какой операции вылазят наны, и логгинга весов/градиентов

Как это сделать по-умному? Потому что мне на ум пришло только logging.info(*args) в каждый слой запихать

Хз, я прямо в тензорборде нормы рисую, а для проверки какая операция нан дала у торча есть встроенный инструмент есть

Спасибо 🙏 Пойду разбираться

Нашел в чем проблема - при переводе в флоты лосс округляется не туда куда надо
Ссылка на тред в гите:
https://github.com/pytorch/pytorch/issues/40497

всем привет. кто знает, есть ли тренажеры по  pandas типа sql-ex (тренажер для sql😁)?

100 pandas exercises погугли (и тому подобное)

ок. спасибо!

Нужно ли избавляться от жестких корреляций (есть иногда столбцы чуть ли не в точности совпадают) при применении PCA?

Кажется, что при поиске подходящей системы координат на таких столбцах не будет достигаться макс дисперсия, а след-но они не будут выбираться в качестве компонент (ток 1 из них), но с другой, если не будут, а они будут в СК линейно зависимы, то и нафиг они нужны (+ скорость можно повысить немножк)🤔

не нужно

понял, но сможешь если что зашарить почему?)

Ну PCA это метод избавления от корреляций, зачем плодить сущности

Просто будет ось с околонулевой дисперсией

C 12 по 25 апреля приглашаем принять участие в EPAM Data Hiring Weeks!
Станьте частью команды EPAM и получите welcome-бонус в размере одного оклада.

Направления:
BigData: https://epa.ms/EPAM-BigData-HiringWeek-apr
Data Quality: https://epa.ms/EPAM-DataQuality-HiringWeek-apr

Как подать заявку:
1. Заполните регистрационную форму и получите подтверждение;
2. Пройдите интервью и получите оффер в течение 24 часов.

Мы ценим ваше время, и эта одна изпричин проведения мероприятия – не нужно долго ждать решения. После успешногопрохождения интервью в течение 24 часов вам будет сделан оффер. Если вы приметеего в период с 12 по 25 апреля, вы получите welcome-бонус.

Ребят , можете подсказать чат по reinforcement learning ?