Size: a a a

Natural Language Processing

2019 December 03

V

Vlad in Natural Language Processing
Мне они вообще не понравились. Единственный плюс - это очень низкая цена. Но что б настроить машину - надо поебаться, ибо там нельзя поставить просто обычную убунту
Плюс доступ по ssh крайне неудобный, нет scp и он лагает. А через ноутбук всё лагает ещё больше, в терминале после ввода буквв и её отображения проходит около секунды
источник

V

Vlad in Natural Language Processing
Хотя при этом с google cloud platform таких проблем вообще нет
источник

V

Vlad in Natural Language Processing
Но там дорого, да
источник

CT

Cookie Thief in Natural Language Processing
Ну это же не для разработки сервак
источник

V

Vlad in Natural Language Processing
Ну там только если закинуть архив, распаковать, выполнить скрипт по настройке окружения, надеяться что не нужно будет докидывать вручную библиотек и запустить обучение
источник

V

Vlad in Natural Language Processing
Но лично мне даже такой сценарий не очень зашёл, были проблемы с установкой ffmpeg, pyicu и ещё чем-то. Причём в качестве образа для машины использовал pytorch-dev, который по идее уже должен быть напичкан всем, чем надо...
источник

YB

Yuri Baburov in Natural Language Processing
а на vast.ai нельзя свой докер закинуть разве?
источник

V

Vlad in Natural Language Processing
У меня не вышло, надо как минимум иметь свой образ в docker registry, который походу должен быть доступен публично
источник

V

Vlad in Natural Language Processing
источник

V

Vlad in Natural Language Processing
Т.е. нельзя свой архив с образом подсунуть или хотя бы ссылку на гит с данными авторизации. Или я не разобрался просто
источник

AK

Alexander Kukushkin in Natural Language Processing
А мне понравился vast.ai. Там важно сделать две вещи:
1. подготовить контейнер со своим окружением и работать из него, не использовать их jupyter и дефолтные контейнеры
2. сделать ssh port forwarding получится локальный jupyter только с gpu.

Мой контейнер и заметки https://github.com/kuk/my-vast

Ещё там отзывчивая поддержка, фаундеры в чате отвечают )) И в целом идея хорошая
источник

V

Vlad in Natural Language Processing
Но контейнер то должен быть в публичном доступе? свой образ с нужным окружением
источник

AK

Anton K. in Natural Language Processing
jupyter это же не про продакшн?
источник

AK

Anton K. in Natural Language Processing
или я что-то путаю?
источник

m

mel kaye in Natural Language Processing
Anton K.
jupyter это же не про продакшн?
well yes, but technically no
источник

m

mel kaye in Natural Language Processing
есть нептун, вот он +- про прод
источник

AK

Anton K. in Natural Language Processing
у меня задача простая. нагородить рест сервис
источник

AK

Anton K. in Natural Language Processing
задеплоил сейчас на тачку без GPU, но грусть печаль
источник

V

Vlad in Natural Language Processing
А что у вас за нейронка?
Многие нейронки на cpu работают не сильно медленнее, чем на gpu. А если нейронка маленькая, то на gpu она вообще медленнее будет работать, чем на хорошем cpu
источник

AK

Anton K. in Natural Language Processing
у меня нейронка, которая ищет объекты на фото
источник