NK
с w2v идёт база на 95 мегабайт всего
Size: a a a
2017 April 17
YB
ну возьми rusvectores
NK
ну кто там придумал w2v, я не помню так
YB
1) вообще, лучше про это спрашивать в группу комп. лингвистики — там многие DL 4 NLP занимаются.
2) я делаю сейчас большое исследование про word2vec для русского языка, надеюсь через месяц или раньше опубликую на хабре, и предоставлю возможно более качественные модели чем word2vec для русского в опен-сорс.
2) я делаю сейчас большое исследование про word2vec для русского языка, надеюсь через месяц или раньше опубликую на хабре, и предоставлю возможно более качественные модели чем word2vec для русского в опен-сорс.
NK
я сделал 2 своих базы, одну из худлита, всяких детективов, другую из БСЭ и справочников. и вижу что сотни мегабайт это ни о чём. надо раз в 10 больше
YB
ну естественно. вопрос-то в чём?
NK
вопрос в том, как всё таки что-то вытянуть из того что есть. ребёнка никто 40 миллионов слов не учит же
YB
странный вопрос. тебе шашечки или ехать?
YB
самолёт тоже крыльями не машет, но летает лучше птицы
YB
больше грузоподъёмность, так сказать
YB
что плохого в том, чтобы сделать unsupervised training для векторов на большом корпусе?
NK
что плохого в том, чтобы сделать unsupervised training для векторов на большом корпусе?
идея то хорошая, только в w2v данных нужно гораздо больше, чем там дают авторы
YB
какие авторы? где дают?
NK
какие авторы? где дают?
Милонов или Миколов
YB
а обязательно у этих авторов данные брать?
NK
они на 95 мегабайтном корпусе запускать предлагают. а это супер мало
YB
да ничего они не предлагают
YB
что ты за чушь несёшь такую
YB
https://scholar.google.com/citations?user=oBu8kMMAAAAJ
вот его работы. где он такое предлагает?
вот его работы. где он такое предлагает?