Size: a a a

AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2

2021 January 14

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Ребят, подскажите, а как можно сделать так, чтобы по оглавлению программа посмотрела книгу, а потом в один массив на питон записала тему главы (название), а в другой массив текст , который в этой главе ?
источник

AD

Artemiy Dubovoy in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Ребят, подскажите, а как можно сделать так, чтобы по оглавлению программа посмотрела книгу, а потом в один массив на питон записала тему главы (название), а в другой массив текст , который в этой главе ?
Поиск по тексту с параметризованными регулярками. Всё закрывается стандартной библиотекой re
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Artemiy Dubovoy
Поиск по тексту с параметризованными регулярками. Всё закрывается стандартной библиотекой re
Ок, спасибо
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Я правильно понимаю, что gpt-3 английская версия только по API, a gpt-2 можно скачать ? Но где ?
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Я правильно понимаю, что gpt-3 английская версия только по API, a gpt-2 можно скачать ? Но где ?
https://huggingface.co/models тут и английская, и русская есть, и ещё 100500 других моделей
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
David Dale
https://huggingface.co/models тут и английская, и русская есть, и ещё 100500 других моделей
)) спасибо
источник

AB

Arcady Balandin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
SberAI но уровень чот не тот
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Arcady Balandin
SberAI но уровень чот не тот
Всмысле сберовская модель на 760 миллионов параметров слабее , чем английская на 175 миллиардов параметров ?
источник

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Всмысле сберовская модель на 760 миллионов параметров слабее , чем английская на 175 миллиардов параметров ?
Очевидно :)
источник

AB

Arcady Balandin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Всмысле сберовская модель на 760 миллионов параметров слабее , чем английская на 175 миллиардов параметров ?
Но ведь и русский язык в стопятьсот раз богаче аглицкого
источник

MC

Makha Cloud in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Arcady Balandin
Но ведь и русский язык в стопятьсот раз богаче аглицкого
На протяжении 2 тысячелетий откуда только русский язык не взаимствовал.
источник

MC

Makha Cloud in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
источник

AB

Arcady Balandin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Фигня. Задорнова смотрите. Ваше энэлпи ничто
источник

MC

Makha Cloud in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Arcady Balandin
Фигня. Задорнова смотрите. Ваше энэлпи ничто
Наберлин?)
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Всмысле сберовская модель на 760 миллионов параметров слабее , чем английская на 175 миллиардов параметров ?
Так это ж хорошо, что модель маленькая. Можно на ноуте или дешёвом серваке её запускать и даже дообучать для собственных задач)
А гпт-3 дообучить нереально без суперкомпьютера.
источник

AB

Arcady Balandin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Кто тут хотел уместить гпт3 на дискету? Где этот чувак?
источник

VC

Vadim Chashechnikov in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
David Dale
Так это ж хорошо, что модель маленькая. Можно на ноуте или дешёвом серваке её запускать и даже дообучать для собственных задач)
А гпт-3 дообучить нереально без суперкомпьютера.
А ее уже пытались прунить?
источник

DD

David Dale in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Vadim Chashechnikov
А ее уже пытались прунить?
Быстрый гуглинг "distilled gpt3" и "compressed gpt3" результатов не дал, но может быть можно поискать повнимательнее.
А вот gpt2 вроде бы довольно успешно дистиллировали, на 🤗 есть distilgpt2.
Хотя, конечно, в целом эффективно сжимать языковые модели человечество только ещё учится.
источник

kk

k k in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Arcady Balandin
Кто тут хотел уместить гпт3 на дискету? Где этот чувак?
Ну я...)
источник

AB

Arcady Balandin in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
k k
Ну я...)
Мы ждём от тебя результов
источник