Size: a a a

Natural Language Processing

2020 February 27

D

Den in Natural Language Processing
Можно ли портировать pytorch модель обратно в torch?
источник

D

Den in Natural Language Processing
тем более если используется huggingface/transformers
источник

V

V in Natural Language Processing
Den
Можно ли портировать pytorch модель обратно в torch?
можно, ничто не мешает описать модель в "старом" torch и потом конвертировать веса. у huggingface был пост в блоге на эту тему, правда там портировали TF в Pytorch
источник

V

V in Natural Language Processing
непонятно правда, зачем это делать
источник

D

Den in Natural Language Processing
чтобы запускать GPT-2 локально
источник

D

Den in Natural Language Processing
с которым, кстати, мне так и не помогли
источник

OS

Oleg Serikov in Natural Language Processing
Den
с которым, кстати, мне так и не помогли
источник

D

Den in Natural Language Processing
помощь в плане "запилить подобное но для huggingface/transformers" нужна
https://colab.research.google.com/drive/1VLG8e7YSEwypxU-noRNhsv5dW4NfTGce
источник

V

V in Natural Language Processing
Den
чтобы запускать GPT-2 локально
ничего не понятно.
источник

D

Den in Natural Language Processing
V
ничего не понятно.
чтобы была возможность генерить текст локально без вылетов и зависаний модели на менее жирных видеокартах
источник

V

V in Natural Language Processing
Den
с которым, кстати, мне так и не помогли
ну что поделать. если никто не может помочь - надо вооружаться необходимыми знаниями, и решать задачу самостоятельно. не помню толком, что у тебя была за проблема, но помню что это было что-то не очень сложное, и довольно давно
источник

D

Den in Natural Language Processing
мне нужна базовая обёртка в ipynb под GPT-2
источник

D

Den in Natural Language Processing
пример выше
источник

V

V in Natural Language Processing
Den
мне нужна базовая обёртка в ipynb под GPT-2
"обёртка" - это некорректный в данном случае термин. ну и в чём проблема, собственно? есть пример на колабе, разбери да перепиши, что тебе нужно.
источник

D

Den in Natural Language Processing
я нихрена не разбираюсь в huggingface/transformers
источник

D

Den in Natural Language Processing
и в их документации такой же базовой нет
источник

V

V in Natural Language Processing
вот документация. https://huggingface.co/transformers/
можно начать с неё, изучить структуру проекта, и задавать уже конкретные вопросы по той или иной проблеме. если не отвечают на конкретные вопросы тут - можно пойти в issues проекта на github, и спросить там. сейчас, между строк, твоя просьба помочь звучит как "я не могу завести GPT-2 на своей машине и не хочу разбираться, напишите за меня код, чтобы всё работало". естественно, мало кто может помочь при такой постановке вопроса.
источник

D

Den in Natural Language Processing
какой же я непредусмотрительный
https://github.com/huggingface/transformers/issues/3045
источник

D

Den in Natural Language Processing
нет он не так звучит,
"трэш в вашей документации - КГ/АМ https://github.com/huggingface/transformers/blob/master/examples/run_generation.py, запилите нормальный notebook с минимальным примером"
источник

D

Den in Natural Language Processing
тыкать во всё подряд и вслепую затирать функции в том недоразумении как-то не хочется
источник