V
мм, альтернативная? :)
Size: a a a
2019 July 10
V
гипотеза и контр-гипотеза, вроде так :)
V
Впрочем, речь про A/B/C/D тесты, и там все интересно :)
LM
Гипотеза "альтернативная" ещё до того, как мы хоть что-то посчитали, она так и называется, равно как и нулевая гипотеза
Ну если p-value=0,03 то это говорит о том что данные отличаются, если гипотеза подразумевал схожесть данных
AZ
Это значит что гипотеза альтернативная, или простыми словами, это значит что данные статистически отличаются
Это значит что в нашем тесте вероятность получить такие различия, как мы получили, даже если на самом деле группы между собой не отличаются - всего 3%. То есть 97% вероятности, что различие действительно есть и 3% что его на самом деле нет. Принимать ли при таком значении альтернативную гипотезу и говорить, что данные отличался - отдельное решение (небольшая вероятность того, что они не отличаются, все таки есть). В научных работах, где дополнительные элементы ставить дорого, считается что можно считать верной альтернативную гипотезу при p-value<0.05, но мы для себя решили, что нужно брать только <0.01, мы же в интернете, тут ещё данных получить обычно можно быстро и дешёво
VT
Это значит что в нашем тесте вероятность получить такие различия, как мы получили, даже если на самом деле группы между собой не отличаются - всего 3%. То есть 97% вероятности, что различие действительно есть и 3% что его на самом деле нет. Принимать ли при таком значении альтернативную гипотезу и говорить, что данные отличался - отдельное решение (небольшая вероятность того, что они не отличаются, все таки есть). В научных работах, где дополнительные элементы ставить дорого, считается что можно считать верной альтернативную гипотезу при p-value<0.05, но мы для себя решили, что нужно брать только <0.01, мы же в интернете, тут ещё данных получить обычно можно быстро и дешёво
ну вот, теперь тебе новый вопрос придется готовить, этот ты спалил )))
VT
запасаюсь поп-корном )))
V
да лан, где наши бигдаты не пропадали :)
AZ
ну вот, теперь тебе новый вопрос придется готовить, этот ты спалил )))
Ну если придет человек из чата, который потратил время, чтобы прочитать этот занудный ответ, и сможет то же самое рассказать не глядя на шпаргалку - это уже залог успеха на собеседовании
V
колмбогоров-смирнов и мани-уитни, это не муж и жена, а 4 разных человека :)
VT
Ну если придет человек из чата, который потратил время, чтобы прочитать этот занудный ответ, и сможет то же самое рассказать не глядя на шпаргалку - это уже залог успеха на собеседовании
и тут ты его прихлопнешь тестом: вот вам книга по статам, где там про p-value?
Или вопросом как его посчитать
Или вопросом как его посчитать
V
и тут ты его прихлопнешь тестом: вот вам книга по статам, где там про p-value?
Или вопросом как его посчитать
Или вопросом как его посчитать
в самом начале будет
V
всякая лабуда про т-критерии, стандартные отклонения, сигмы, 2 сигмы, 6 сигм (ой это другое)
VT
Еще классный вопрос: я подкинул монетку 5 раз, 3 раза выпал "орел". Значит ли это, что монетка кривая и чаще орлом выпадает?
VT
Пример "из жизни": я сделал 1000 показов на сайте из whitelist, а клика не было. В каких пределах лежит CTR по этой площадке?
V
Еще классный вопрос: я подкинул монетку 5 раз, 3 раза выпал "орел". Значит ли это, что монетка кривая и чаще орлом выпадает?
это ничего не значит
AZ
мне больше нравится, когда две монетки, каждую подкинули 100 раз, на одной орёл 53 раза, на другой 45. Значит ли, что монетки отличаются?
VT
это ничего не значит
правда? ну ок, не делать нефиг, кину еще 95 раз. Опять орлов больше: 60 орлов и 40 решек
V
монетки отличаются, потому что при изготовлении никто не парится над микронной точностью. И кидающий не кинул 100 раз одинаково
V
правда? ну ок, не делать нефиг, кину еще 95 раз. Опять орлов больше: 60 орлов и 40 решек
уже интересней