Size: a a a

AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2

2021 March 19

OV

Oleg Vatalev in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timofey Naumenko
Как на компьютере быстро вычислить вероятность того, что сэмпл из одной гауссианы будет меньше, чем из другой? Пока вижу только через интеграл, или приблизить методами монте-карло :(
Сэмпл рандомизированный?
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Да, то есть надо просто посчитать P(s1, m1, s2, m2) много-много раз.
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Там можно много чего наприближать ручками, но я думал, может этот интеграл сворачивается в какую-нибудь специальную функцию, у которой есть готовые реализации.
Интеграл, к которому все сходится: int[-inf, +inf](f1(x)F2(x)dx)
f1 - плотность распределения гауссианы с m1, s1, F2 - функция распределения гауссианы с m2, s2
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timofey Naumenko
Как на компьютере быстро вычислить вероятность того, что сэмпл из одной гауссианы будет меньше, чем из другой? Пока вижу только через интеграл, или приблизить методами монте-карло :(
Можно представить , что у тебя есть две независимые нормальные величины. Тогда их разность тоже распределена нормально с матожиданием m1-m2 и стандартным отклонением sqrt(s1^2+s2^2). И эта разность отрицательна тогда и только тогда, когда вторая гауссиана больше первой. Значит, вероятность этого события равна просто CDF этой разности в нуле.
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
def p_dist_sum(m1, s1, m2, s2):
   m = m1 - m2
   s = np.sqrt(s1 ** 2 + s2 ** 2)
   return F(0.0, m, s)
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Как раз в википедии отыскал свойство))
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
А, только видимо надо разность...
источник

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timofey Naumenko
Как на компьютере быстро вычислить вероятность того, что сэмпл из одной гауссианы будет меньше, чем из другой? Пока вижу только через интеграл, или приблизить методами монте-карло :(
посчитать 1 раз руками интеграл?
источник

TN

Timofey Naumenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Evgenii Zheltonozhskii🇮🇱
посчитать 1 раз руками интеграл?
Видимо, надо было таки раскрыть F во второй интеграл)
источник

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timofey Naumenko
def p_dist_sum(m1, s1, m2, s2):
   m = m1 - m2
   s = np.sqrt(s1 ** 2 + s2 ** 2)
   return F(0.0, m, s)
ну или так, да)
источник

OV

Oleg Vatalev in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Timofey Naumenko
Как на компьютере быстро вычислить вероятность того, что сэмпл из одной гауссианы будет меньше, чем из другой? Пока вижу только через интеграл, или приблизить методами монте-карло :(
Я спросоня подумал что эту задачу можно решить как-то через парметрический стат критерий типа одностороннего t критерия стьюдента
источник

AR

Anastasia Rebenko in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Можете помочь распарсить xml файл на PostgreSQL :
есть файл с запросом. Если в запросе закомментировать unnest((xpath('////@E3_10', xt1.col))) as E3_10 то выдает 3 строки, иначе только 1. Понимаю почему так, но не знаю как обойти. И unnest в выводе думаю не правильно, но тоже не знаю как по другому.

Версия PostgreSQL 9.6.2
источник

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
⚡️Виктор Кантор назначен директором Центра Big Data МТС. На этом посту он сменит Леонида Ткаченко, который переходит на должность советника президента компании.

До назначения Кантор был Chief Data Sceintist МТС. Номинант рейтинга “30 до 30” Forbes. Выпускник факультета инноваций и высоких технологий МФТИ. До МТС Кантор работал в ABBYY, строил службу машинного обучения «Яндекс.Такси», запускал Академию больших данных в Мэйл.ру, будучи программным директором компании.

Серьезное усиление новой команды управленцев под руководством Николаева.
источник

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Все перемены к лучшему (с)
источник

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Кстати, в @datasciencejobs как раз вакансия в МТС, заниматься моделями и ASR
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Ребят, можете прислать (показать) хорошо смотнированное видео может с крутыми спецэффектами о том, что делают сеньоры data scientist'ы ? Что они делают и зачем ? И почему это круто.
Просто видосики в личку или в чат...
источник

EZ

Evgenii Zheltonozhsk... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
источник

ПП

Проксимов Прксимович... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Ребят, можете прислать (показать) хорошо смотнированное видео может с крутыми спецэффектами о том, что делают сеньоры data scientist'ы ? Что они делают и зачем ? И почему это круто.
Просто видосики в личку или в чат...
Крутыми спецэффектами)?
источник

ПП

Проксимов Прксимович... in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
На фоне взрыв?
источник

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
:D
источник