I
Иначе успех никто не гарантирует
Size: a a a
2020 June 04
RA
Почитай классические статьи Ксавье Глоро и Хе Кайминя
Да, читать нужно. А интуицией можете поделиться если уже читали ?
RA
Это значит что веса нужно инициализировать по Кайминю или по Ксавье
То есть мы не знаем другие способы работают ли ?
RA
Я просто думал можно ли сделать время в трен меньше и весов меньше играя с инит
I
Rauan Akylzhanov
То есть мы не знаем другие способы работают ли ?
Мы знаем, что эти способы имеют обоснование и работают.
I
Rauan Akylzhanov
Я просто думал можно ли сделать время в трен меньше и весов меньше играя с инит
Если речь не идёт о he или glorot - очень сомнительно
I
Если только датка будет ровной, звёзды сойдутся и дождь пройдет в четверг. Раку на горе свистеть не обязательно.
RA
Мы знаем, что эти способы имеют обоснование и работают.
Я это понял. Но эти способы лишь достаточные условия
RA
Мы знаем, что эти способы имеют обоснование и работают.
Отсеивать сентимент от факта сложно. Мы просто не знаем? К чему отсылает сомнительно, опыт или вера ?
I
Rauan Akylzhanov
Отсеивать сентимент от факта сложно. Мы просто не знаем? К чему отсылает сомнительно, опыт или вера ?
Почему сентимент? В последних статьях вполне приличное обоснование приводится.
RA
Почему сентимент? В последних статьях вполне приличное обоснование приводится.
Супер тогда! Нужно почитать
A
Всем добрый вечер.Хотел узнать кое что.Я сейчас изучаю deep learning for nlp .Вроде понятно нейронные сети(bckpropagation cnn rnn lstm beart и т.д). Но меня беспокоит в начале должен был ли я учить machine leaning алгоритмы( Logistic Regression, Decision Tree, K Nearest Neighbors, SVM) или продолжит deep learning ?
RA
Как думаешь их знание или незнание сейчас мешает пониманию?
RA
того что ты читаешь
A
Rauan Akylzhanov
Метод по умолчанию, начиная с RNN, LSTM, Transformers, BERT, ERNIE 2.0. Если бы я сам начал делать pre-training
RA
Статья очень в тему! Я давно пытался понять инициализацию и траекторию бы еще при обучении
RA
Из того, что ребята тут сказали можно много понять
A
RA
Всем добрый вечер.Хотел узнать кое что.Я сейчас изучаю deep learning for nlp .Вроде понятно нейронные сети(bckpropagation cnn rnn lstm beart и т.д). Но меня беспокоит в начале должен был ли я учить machine leaning алгоритмы( Logistic Regression, Decision Tree, K Nearest Neighbors, SVM) или продолжит deep learning ?
Бывает на интервью любят гонять, так что пригодится для этого
A
Кстати, тут авторы говорят, что они выложили в опен соурс все свои результаты и код для будущего ресерча, но я не нашел( Если кто-то нашел скиньте, пожалуйста