RS
Уфф... 100% что можно сделать быстрее, там наверняка аллокации на аллокациях сидят.
Регулярка на регулярке без прекомпиляции
Size: a a a
2020 December 27
АО
О, можно все на Automa.jl переписать, будет быстрее некуда :-)
RS
На сколько я понял, код там писал студент. Причём переносил с питона как есть, не вникая в задачу. Если это не только какая-то курсовая, то, вероятно, возьмётся доделать
АО
Судя по тому, что последний PR состоялся пять месяцев назад, доделывать не будет.
АО
Но как обычно - это MIT, если кто-то соберётся с силами и форкнет, все будут только благодарны.
АО
Весь проект 150 LOC, если кто-то захочет его оптимизировать, там все будет достаточно прозрачно.
АО
Переслано от Roman Samarev
К вопросу о производительности на сегментации предложений. Черновые материалы. GUM Corpus. Фрагмент ~ 5 тыс предложений
А есть какой-нибудь скрипт, который эту матрицу строит? Можно куда-нибудь его запаблишить, чтобы велосипед каждый раз не изобретать.
RS
Нет, скрипта этого нет. И код бенчмарка пока никуда не выложен.Впрочем, автор скрипта в чате присутствует. По предварительным планам - довести это до публикуемого вида сразу после нового года.
RS
Кстати, код бенчмарка написан на Джулии. Средства на Java и Питон вызываются непосредственно из Джулии
УМ
друг попросил ссылки на эту красоту
RS
Графики в экселе нарисованы
УМ
Переслано от Svetozar Lashin
надо бы уточнить, есть там лемматизация или нет. ссылка есть?
RS
Названия пакетов же есть…
RS
Кстати, TextAnalysis, в ноябре обновили. Наконец…
RS
Но как был ориентирован на пакетную обработку корпуса, так и остался
АО
Да ладно, не томите :-) в этом чате можно и в полуготовом виде выкладывать, наоборот помогут ошибки ещё в альфа версии выловить.
АО
И графики в Plots перерисуем :-)