L
а какой у тебя словарь символов? А-я кирилица? было бы неплохо если бы в задаче тоже диапазон символов прописали)
[a-z]
Size: a a a
2020 June 23
НА
[a-z]
там по задаче типа кирилица в примерах) в разном регистре, но да, можно и с простого начать)
L
а какой у тебя словарь символов? А-я кирилица? было бы неплохо если бы в задаче тоже диапазон символов прописали)
чем больше словарь, тем лучше(меньший кеш можно)
DE
чем больше словарь, тем лучше(меньший кеш можно)
[a-zA-Z]
L
там по задаче типа кирилица в примерах) в разном регистре, но да, можно и с простого начать)
это без разницы, я же в u16 храню
НА
это без разницы, я же в u16 храню
ага, а чего не uint8?
НА
там же 256 символов словарь вмещается
L
ага, а чего не uint8?
тогда время надо тратить, на парсинг utf8
НА
тогда время надо тратить, на парсинг utf8
да, но для словаря A-z вроде не надо, так как все такие символы латиницы это 1 байт вроде
L
ага, а чего не uint8?
хотя в самой идб, можно и в utf8 хранить в принципе, все равно время на парсинг несоизмеримо меньше будет загрузки
НА
да, я просто про uint8 подумал чисто для экономии памяти)
L
да, я просто про uint8 подумал чисто для экономии памяти)
а ты хочешь свой алфавит сделать? это сложнее и не так универсально
p
И не будешь шарить если не напишешь
надо резюме) у тебя есть?
НА
а ты хочешь свой алфавит сделать? это сложнее и не так универсально
да, я думал об этом в концексте кириллицы. для словаря A-z вроде это не нужно. просто все символы в числовые коды переводим и сохраняем в uint8, точнее в данном случае можно наверное просто int8 по 100 числовых кодов
DE
persona x grata
надо резюме) у тебя есть?
Нету
НА
а ты хочешь свой алфавит сделать? это сложнее и не так универсально
но в любом случае да, получается, что я хочу через map) не факт, что быстро будет
L
да, я думал об этом в концексте кириллицы. для словаря A-z вроде это не нужно. просто все символы в числовые коды переводим и сохраняем в uint8, точнее в данном случае можно наверное просто int8 по 100 числовых кодов
а если в тексте кирилица? тогда надо строку помечать, что кирилица и парсить уже подругому
L
а в ютф8 и это уже есть
L
можно еще хафманом сохраняать, 25 букв бит в 5 выйдут
L
но парсить это все, 3 бита того не стоят