YB
но зачем ты это сделал?
Size: a a a
2016 September 05
NK
разобраться хочу
NK
w2v переводит текст в цепочку цифр. что с этими цифрами дальше происходит?
YB
что хочешь, то и происходит. для разных задач методы разные
YB
кто в RNN загоняет, кто Convolution с ними устраивает
NK
вот, как большую цифру загнать в сеть мелкой размерности?
YB
рекомендую http://nlp.stanford.edu/courses/NAACL2013/NAACL2013-Socher-Manning-DeepLearning.pdf посмотреть, там ещё и аудио-видео даже было http://nlp.stanford.edu/courses/NAACL2013/
YB
embedding позволяет слово заменить на его вектор. всё.
NK
как? :)
YB
из массива берёт вектор по id слова
NK
а как массив составляется?
YB
с помощью алгоритма. алгоритмы разные. их названия: word2vec, glove, feature_hashing
YB
алгоритм пробегается по большому корпусу текста и составляет этот массив.
YB
потом этот массив просто хранится в файле
NK
каким образом?
YB
однослойная нейросеть в случае word2vec.
NK
какой размер входного слоя и что на него подаётся?
YB
какого входного слоя?
NK
ну у сети какие слои? входной и выходной
YB
в случае word2vec? там 4 варианта алгоритма разных