A
CPU для перцептрона за глаза хватит
Size: a a a
2021 June 16
AG
Маленькие сетки можно на сравнительно слабом железе тренировать.
AG
Типа MNIST прилично научить уже что-то надо. Но тоже не сверхъестественное ещё.
DD
Для маленьких сеток CPU хватает, для сеток побольше (типа BERT) - бесплатного GPU на Колабе.
ЕК
Сколько учится мнист на стандартном компе? Пытался найти эту информацию но не смог
VC
Вопрос неправильный, но ответ не больше часа
ЕК
На какой процент правильных ответов можно при этом рассчитывать?
VC
Вопрос неправильный, но ответ больше 97%
ЕК
Спасибо огромное. Вы мне сэкономили массу времени.
ЕК
Я так понял это обучение на ГПУ. Если на ЦПУ то срок обучения возрастает.
VC
Вы не учитываете размер сети
ЕК
Допустим, что архитектура сети максимально приближена к оптимальной. Не будем учитывать совсем не подходящие варианты.
ЕК
Понятно, что там масса деталей. Можно же предположить какие то оптимальные условия среднюю температуру по больнице.
VC
Не туда думаете, оптимальная архитектура будет иметь бесконечность параметров. Я про то, что в зависимости от сети которую вы будете тренировать крайне сильно зависит скорость обучения
ЕК
Насколько помню бесконечность предполагает запоминание. Сильно большую сеть тоже нельзя брать. Она быстро запомнит все значачения и результат на новых данных будет низким
VC
В общем, каждый комп может натренировать маленькую сеть на мнист, не надо вам париться
SL
коллега вам говорит, что общей формулы, чтоб и рыбку сьесть и все остальное - нет
SL
Учебные стандартные задачи, как правило, за приемлимое время на цпу решаются. Все остальное - уже скорее нет, чем да
П
Емнип, 97% на мнисте учатся минут 5 на обычном цпу