Size: a a a

AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2

2021 February 23

АК

Андрей Копылов... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Alisa
А почему матстат скажет ставить на чёрное, разве выпадение чисел на рулетке - зависимые события (те выпадение красных как-то может повлиять на выпадение черных в будущем)?
Нет, 50 на 50, события между собой не связаны.. Ошибочка.. Но смысл поняли, что анализ данных скажет ставить на красные)
источник

VC

Vadim Chashechnikov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Привет, какой RL фреймворк для торча посоветуете?
источник

AN

Alexey Nikitin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
А почему торча, а не например TF и tfagents ??
источник

VC

Vadim Chashechnikov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Торч знаю в разы лучше
источник

VC

Vadim Chashechnikov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Вроде бы spinning up интересный
источник

AN

Alexey Nikitin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Vadim Chashechnikov
Торч знаю в разы лучше
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Андрей Копылов
Мат статистика и анализ данных всё-таки имеют разную философию..

Классический пример: рулетка в казино 30 раз подряд выпала на красное. Мат стат скажет ставить 50 на 50, тк события между собой не связаны.. А анализ данных покажет, что надо ставить на красные, потому что рулетка имеет дефект и скорее всего опять будет красное.

Для чего тебе статистическая мощность из мат стата?)
Ученные проверяют мои расчеты и мне грустно когда они спрашивают некоторые слова которые не полностью понятны..правда спрашивают они из мат стата, а делаю я анализ данных
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Андрей Копылов
Мат статистика и анализ данных всё-таки имеют разную философию..

Классический пример: рулетка в казино 30 раз подряд выпала на красное. Мат стат скажет ставить 50 на 50, тк события между собой не связаны.. А анализ данных покажет, что надо ставить на красные, потому что рулетка имеет дефект и скорее всего опять будет красное.

Для чего тебе статистическая мощность из мат стата?)
Неверно.
Матстат как раз может посмотреть на выборку, проверить гипотезу, что события не связаны, и отвергнуть её.
Предположение о независимости разных запусков рулетки делается "из башки", исходя из общего представления об устройстве мира, но это именно что предположение.
И вообще, матстат - это подмножество анализа данных, поэтому странно их противопоставлять)
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Тут немного другое определение, но мой вопрос был в другом.
Мощность нужно рассчитывать, чтобы если различия в группах были незначимы, то никто не мог сказать что типо мало набрал наблюдений.

Но у меня не про группы анализ, у меня задача - найти связь между переменными (корреляцию), и я не пойму нужно ли мощность рассчитывать для этой задачи
Понятие статистической мощности определено только применительно к какому-то конкретному статистическому тесту, который проверяет какую-то конкретную гипотезу.
Если же ты просто оцениваешь какой-то параметр (например, корреляцию), а гипотез не проверяешь, то и мощность ни при чём.
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
David Dale
Понятие статистической мощности определено только применительно к какому-то конкретному статистическому тесту, который проверяет какую-то конкретную гипотезу.
Если же ты просто оцениваешь какой-то параметр (например, корреляцию), а гипотез не проверяешь, то и мощность ни при чём.
Спасибо , крутой ответ
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
David Dale
Понятие статистической мощности определено только применительно к какому-то конкретному статистическому тесту, который проверяет какую-то конкретную гипотезу.
Если же ты просто оцениваешь какой-то параметр (например, корреляцию), а гипотез не проверяешь, то и мощность ни при чём.
А если моя гипотеза, в том, что признак Х влияет на признак У (т е корреляция сильная), то мощность нужна ?
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
А если моя гипотеза, в том, что признак Х влияет на признак У (т е корреляция сильная), то мощность нужна ?
"Корреляция сильная" - это так себе гипотеза. Нужно более строго определить)

Обычно делают нулевую гипотезу, что корреляция равна нулю, и альтернативную гипотезу - что корреляция не равна нулю.
Такую гипотезу уже можно проверять и отвергать, и если ты нулевую гипотезу отверг - значит, влияние есть (хоть *направление* этого влияния не обязательно такое, как думаешь).

Но для вычисления мощности нужна не только конкретная нулевая, но и конкретная альтернативная гипотеза: если гипотеза равна не нулю, то - чему конкретно?
источник

I

Ilya in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
На колабе  2vCPU, то есть 2 виртуальных процессора?
У себя на компе я поставил num_of_workers в моделях 0 потому что процесс зависал и проблемы делал, по идеи этот параметр нужно в количество процессоров устанавливать, то есть в случае коллаба 2 будет оптимальным?
Или это еще от количества ядер зависит на каждом  cpu в общем?
Как с колабом всмысле ядер не знаю.
источник

SL

Sergey L in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Может и больше, зависит от сложности вычисления. Формально есть псевдопараллелизм, позволяющий любое число процессов тянуть на одном или более ядрах, но как бы "профита нет"
источник

SL

Sergey L in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Иначе бы у вас гуй и прочее не работало бы вместе, очевидно (речь об ОС и др приложениях)
источник

MC

Makha Cloud in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Sergey L
Иначе бы у вас гуй и прочее не работало бы вместе, очевидно (речь об ОС и др приложениях)
Тяжело без гуя))
источник

KP

Kostas PONOMAREW in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Добрый день, появился вопрос, как изменить цвет у выделенных обозначений?
источник

KP

Kostas PONOMAREW in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Это фото с задания, тут уже изменён цвет
источник

M

Manas in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Kostas PONOMAREW
Добрый день, появился вопрос, как изменить цвет у выделенных обозначений?
Например так
источник

KP

Kostas PONOMAREW in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Manas
Например так
Большое спасибо
источник