AK
Добавить поддержку рекурсивных грамматик. Это изменение потянуло за собой много других, поэтому меняется интерфейс. Появится возможность парсить всякие сложные вещи типа
Size: a a a
2017 July 01
2017 July 02
AI
Всем привет) хотела поблагодарить разработчиков, ваш инструмент просто находка)
AI
а сюда можно задавать тупые вопросы про нормализацию?
DV
Да, конечно.
AI
есть табличка, куда школьники вписывали имена своих друзей, разумеется в самых различных формах, в каждой ячейке имя. Иногда вписывали не имена, много пропусков, фамилию пишут то в начале, то в конце. Хотелось бы на выходе получать нормализированное имя формата имя + фамилия. Видела пример кода в issues, он мне не помог(
AI
проблема еще в том, что я с питоном на Вы, а данных много и ничего лучше не придумалось
DV
Можно извлекать объекты (с полями: имя, отчество, фамилия и т.д.), примеры есть тут: https://github.com/bureaucratic-labs/natasha/blob/master/natasha/grammars/person/tests.py#L210
Кроме полей
Объекты можно сравнивать между собой (как здесь: https://github.com/bureaucratic-labs/natasha/blob/master/natasha/grammars/person/tests.py#L289), чтобы получить только уникальные
Если не горит, постараюсь расписать это дело чуть подробнее, днем по москве :)
Кроме полей
firstname, lastname у объектов есть normalized_firstname, normalized_lastname и т.д. - т.е. слова в нормальной форме (ед. число, им. падеж)Объекты можно сравнивать между собой (как здесь: https://github.com/bureaucratic-labs/natasha/blob/master/natasha/grammars/person/tests.py#L289), чтобы получить только уникальные
Если не горит, постараюсь расписать это дело чуть подробнее, днем по москве :)
AI
Благодарю! Спасибо большое, буду разбираться. В ближайшие дни еще не горит 😁
2017 July 03
DV
Если кому-нибудь интересно, вот так решили эту задачу (поиск имен и приведение их в нормальную и полную форму): https://gist.github.com/dveselov/bad5f236aaf4f61486d0708b628ee05c
DL
посоветуйте, пожалуйста, что-нибудь для выделения географий из текстов на английском (кроме geograpy, почему-то он не устанавливается). Спасибо!
DV
В nltk есть готовые корпуса для английского, http://www.nltk.org/book/ch07.html
Если по каким-то причинам не подойдет, то можно посмотреть в сторону Stanford NER: https://nlp.stanford.edu/software/CRF-NER.shtml
Лучше последнего (из открытых инструментов) наверное ничего нет.
Если по каким-то причинам не подойдет, то можно посмотреть в сторону Stanford NER: https://nlp.stanford.edu/software/CRF-NER.shtml
Лучше последнего (из открытых инструментов) наверное ничего нет.
DL
Stanford NER тоже не получилось установить (
2017 July 06
АМ
Привет всем! А наташа умеет с английским дружить?
DV
Привет. Для этого нужен морфологический корпус для английского языка (которого у нас нет :))
АМ
А чего нибудь подобное на En подсказать можешь?
DV
Ну, я выше писал - Stanford NER, например.
2017 July 16
СС
Доброго времени суток. Не нашёл как можно обучить наташу поиску собственных токенов, ее предопределённых
АМ
Есть пункт документация там отдельная глава про это