d
До того как видюха скажет "Многа данных, мне тяжело, памяти не хватает, памагити"
Я сказал, с учетом аккумуляции градиента. Вы же можете в один батч весь градиент усреднить, при помощи большого gradient_accumulation_steps
Size: a a a
2021 March 26
КМ
Я сказал, с учетом аккумуляции градиента. Вы же можете в один батч весь градиент усреднить, при помощи большого gradient_accumulation_steps
Да, я видимо не понял смысла вопроса ☹️
КМ
Может, еще будут полезны корпуса ошибок, например:
http://web-corpora.net/CoRST/search/?interface_language=ru&search_language=academrussian&contexts_output_language=academrussian
http://www.web-corpora.net/RLC/
http://web-corpora.net/CoRST/search/?interface_language=ru&search_language=academrussian&contexts_output_language=academrussian
http://www.web-corpora.net/RLC/
а как скачать эти корпусы? что-то не вижу ссылок на скачивание.
Eg
а как скачать эти корпусы? что-то не вижу ссылок на скачивание.
я сейчас уже не имею к ним отношения, думаю, стоит написать авторам
КМ
я сейчас уже не имею к ним отношения, думаю, стоит написать авторам
спасибо)
IM
Guys how are you?
MN
Ребята, всем привет!
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
КМ
Marja NY
Ребята, всем привет!
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Если +- одинаковые варианта, то можно и обычную регулярку бахнуть, правила в yargy можно написать, в spacy вроде ner'ом можно даты вытаскивать, диппавлов тоже ner может
N
Marja NY
Ребята, всем привет!
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
в natasha еще date extractor есть
РМ
в natasha еще date extractor есть
О, благодарю
OS
Marja NY
Ребята, всем привет!
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
есть либа dateparser:
dateparser.search.search_datesРМ
есть либа dateparser:
dateparser.search.search_datesОна находит много лишних дат, которые даже не являются датами
SL
Isa Musa
Guys how are you?
Hi. We are doing alright, but btw this is a chat for a more technical questions with the almost russia auditory, yet you are welcome to ask any questions if you have them. May be smne will respond you
KS
Marja NY
Ребята, всем привет!
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
Подскажите, пожалуйста, каким инструментом лучше всего извлекать даты из русского текста (даты могут быть в текстовом формате (8 апреля 2020) и в обычном формате (8.04.20, 08.04.2020 и тд)
В Pullenti есть извлечение дат и их диапазонов, как абсолютных, так и относительных (типа "два дня назад")
2021 March 29
МП
Всем привет!
Подскажите, есть ли какие-то интересные ноутбуки для fine-tune GPT-3 от Сбера?
Подскажите, есть ли какие-то интересные ноутбуки для fine-tune GPT-3 от Сбера?
RT
Всем привет!
Подскажите, есть ли какие-то интересные ноутбуки для fine-tune GPT-3 от Сбера?
Подскажите, есть ли какие-то интересные ноутбуки для fine-tune GPT-3 от Сбера?
Зависит от того, что скрывается подд "интересные"
NS
Всем привет!
Кто-нибудь может посоветовать или поделиться какими-нибудь огромными корпусами слов русского языка, включающие сленг и другие часто встречающиеся в речи слова?
Кто-нибудь может посоветовать или поделиться какими-нибудь огромными корпусами слов русского языка, включающие сленг и другие часто встречающиеся в речи слова?
MM
Корпус слов - это словарь, он не может быть огромным. Огромным может быть только корпус текстов. Есть, например, архив жж за несколько лет bit.ly/salariman
НК
Корпус слов - это словарь, он не может быть огромным. Огромным может быть только корпус текстов. Есть, например, архив жж за несколько лет bit.ly/salariman
Огонь!
НК
Корпус слов - это словарь, он не может быть огромным. Огромным может быть только корпус текстов. Есть, например, архив жж за несколько лет bit.ly/salariman
А кто парсит?