DD
k k
похоже на нормальное, потому что самое верхнее по середине, но справа жирная фигня какая-то , не пойму, то ли нормальное то ли ненормальное
Есть формальные тесты на форму распределения, например kolmogorov-smirnov
Size: a a a
2021 February 22
DD
так надёжнее, чем глазками проверять)
kk
Есть формальные тесты на форму распределения, например kolmogorov-smirnov
Хм...
kk
А есть программа в которую данные залил и она сама скажет какое распределение ? Нормальное или ненормальное ?
DD
k k
А есть программа в которую данные залил и она сама скажет какое распределение ? Нормальное или ненормальное ?
Я загуглил "online kolmogorov smirnov test", вот первый же результат
DD
А вообще, чувак, я понимаю, что сообщество у нас дружелюбное, но неужели сложно самому в гугл сначала залезть?
kk
Я залез залез..
kk
После того как вы сказали что есть тест Колмогорова Смирнова, я про такой не помнил
kk
Как сказали - сразу загуглил , и спасибо что подсказали
DD
k k
После того как вы сказали что есть тест Колмогорова Смирнова, я про такой не помнил
Ну кроме KS есть ещё миллион tests for normal distribution, такой запрос тоже можно было сделать)
kk
Ну кроме KS есть ещё миллион tests for normal distribution, такой запрос тоже можно было сделать)
....я думал всегда что надо как-то на глаз смотреть..)..но да, нужно было спросить гугл : программа для определения нормальности выборки , что-то типо того, согласен
VC
не знаю, все равно до конца в голове не складывается.
Вот такая схема, если натренировать с буквами, какое у вас было бы ожидание, сработает на предикции слов или нет ?
Вот такая схема, если натренировать с буквами, какое у вас было бы ожидание, сработает на предикции слов или нет ?
Подожди, ты на вход даёшь, картинку слова, получаешь букву?
VC
Чтобы детектить буквы, разбей слово на буквы и детекти буквы. 🤓
I
Подожди, ты на вход даёшь, картинку слова, получаешь букву?
да. Но я как бы и тренировал только буквы. Я пока пришел к выводу, что так как тренировал только центрированные буквы, то там attention вообще ничему не научился.
Я проверил эту гипотезу протестировав следующий случай на их оригинальной модели.
Взял слово из этих датасета, вырезал одну букву, и сделал ее "на весь экран", и их модель не смогла определить слово в размер одной буквы, хоть это sub_image картинки, которая у них в тренинге была.
Я проверил эту гипотезу протестировав следующий случай на их оригинальной модели.
Взял слово из этих датасета, вырезал одну букву, и сделал ее "на весь экран", и их модель не смогла определить слово в размер одной буквы, хоть это sub_image картинки, которая у них в тренинге была.
I
Чтобы детектить буквы, разбей слово на буквы и детекти буквы. 🤓
вся тема, что даже они в своем подходе пишут, что нафиг разбивать на буквы даже чтобы тренить, что словами учить проще, потому что даты в мире больше.
I
то есть задача разбития на буквы та еще )
I
да. Но я как бы и тренировал только буквы. Я пока пришел к выводу, что так как тренировал только центрированные буквы, то там attention вообще ничему не научился.
Я проверил эту гипотезу протестировав следующий случай на их оригинальной модели.
Взял слово из этих датасета, вырезал одну букву, и сделал ее "на весь экран", и их модель не смогла определить слово в размер одной буквы, хоть это sub_image картинки, которая у них в тренинге была.
Я проверил эту гипотезу протестировав следующий случай на их оригинальной модели.
Взял слово из этих датасета, вырезал одну букву, и сделал ее "на весь экран", и их модель не смогла определить слово в размер одной буквы, хоть это sub_image картинки, которая у них в тренинге была.
я думаю, что у меня также только наоборот, раз я натренировал только буквы и только в центре изображения.
I
я думаю, что у меня также только наоборот, раз я натренировал только буквы и только в центре изображения.
попробую разбросать, натренить и посмотреть, эта была ли причина, то есть проблема в атрофированном detection, либо другая. Иначе придется сидеть слова лейбелить )))
I
ну либо действительно думать как на буквы разделить
VC
Думаю, легче найти датасет для слов... А в чем общая задача/цель? Просто ты описал свой процесс, но непонятно что в итоге надо? MNIST уже решенная задача вроде....