d
Добрый день! У кого-нибудь была такая проблема, что невозможно ни одну модель из
transformers загрузить?Size: a a a
2021 December 02
ДК
Ошибку выдает?
d
Да, причем переустановка / даунгрейд версии не помогает
d
А что говорит?
d
OsError
OM
У меня на днях были проблемы, загружалось со 2-3 раза, кажется с сетевой доступностью что-то было ближе к их стороне.
d
Нет, сами веса нормально грузятся, ошибка именно в момент инициализации from pretrained
ДК
У меня один раз во время скачки очередной модели что-то пошло не так и записались битые файлы. Потом при любой подгрузке она не докачивала но и не запускалась.
Можно кэш почистить, возможно поможет.* Переустановка кэш не очищает
Можно кэш почистить, возможно поможет.* Переустановка кэш не очищает
d
Я пробовал разные модели, везде выскакивает ошибка.
d
И на свободное место на диске и в оперативке глянуть
ДК
Ладно, давай полный листинг ошибки
d
OSError: Unable to load weights from pytorch checkpoint file for 'google/mt5-small' at '/root/.cache/huggingface/transformers/8e7b2a80ddcb5611b27d8c89e1e8e33a947e105415051402a22b9c8d7d1caeb0.e22331f3a065b885b30ae3dd1ff11ccaf7fbc444485f6eb07ef5e0138bca8b70'. If you tried to load a PyTorch model from a TF 2.0 checkpoint, please set from_tf=True.ДК
Почисти кэш
ДК
и попробуй снова
d
А там с правами/владельцами на файлы кошмара нет?
d
Ну намекает рутовая папка
d
чистка кэша помогла, спасибо
ДК
👍
ДК
И от админа, конечно, не стоит ставить)
KS
Всем привет! (совсем новичок) делаю предобработку текстовых данные. Нашла топ-30 самых популярных слов (в абсолютах через counter), но требуется найти по перцентилям... Может кто-то подсказать, как это сделать? Может какой-то пример кода (ни на каггле, ни на стаковерфлоу не нашла).