Телеграмм чат группы distributed страница 8697

Size: a a a

Distributed

1832 membersпожаловаться на группу

2021 December 01

АЖ

Алексей Жалнин... in Distributed

самое полезное в статье - последний график
https://habrastorage.org/webt/fe/sv/pt/fesvptifrgue8v5todnadlgxqjc.png

источник

20:23пожаловаться #1

МЛ

Марк Лакост... in Distributed

))
чисто теоретически сообщения до 140 символов можно хранить в utf-c и как-нибудь их помечать, а если сообщение больше 140 символов, то уже хранить в utf-8 или других альтернативах

источник

20:29пожаловаться #2

АЖ

Алексей Жалнин... in Distributed

я всё жду, пока тут кто-нить потестит русский словарь на zstd (у самого лапки и вообще это с дивана вставать, корпус сообщений какой-нить конфы искать....)

источник

20:33пожаловаться #3

АЖ

Алексей Жалнин... in Distributed

зы: кто не смотрел - там на 140+ символов выигрывает алгоритм общего сжатия у механизма кодирования символов

источник

20:34пожаловаться #4

Alejandro Kop in Distributed

подскажите, как к этому мне прикрутить эффект fadein или подобный ?

источник

20:42пожаловаться #5

АЖ

Алексей Жалнин... in Distributed

зы: поиск по истории пожатых сообщений как делать то?

источник

20:42пожаловаться #6

Pavel Zlatovratskii in Distributed

Индекс строить.

источник

20:43пожаловаться #7

АЖ

Алексей Жалнин... in Distributed

ага, а это не обработка (разжатие)

источник

20:44пожаловаться #8

Pavel Zlatovratskii in Distributed

В смысле? Ты разжал, построил индекс, разжатое грохнул, осталось пожатое в архиве, после поиска по индексу вытаскивается и разжимается...

источник

20:46пожаловаться #9

Yanis Benson in Distributed

А в чем проблема?

источник

20:47пожаловаться #10

Yanis Benson in Distributed

Вообще, для поиска по тексту чатов индексы не особо нужны

источник

20:48пожаловаться #11

Yanis Benson in Distributed

Полный текст этого чата занимает всего 24мб

источник

20:49пожаловаться #12

Yanis Benson in Distributed

Хранение индекса не окупится, кроме специфичных устройст с очень плохим доступом к хранилищу.

источник

20:49пожаловаться #13

БГ

Бензофуран Гетероцик... in Distributed

А теперь сколько весят все чаты твоего аккаунта?

источник

20:50пожаловаться #14

Pavel Zlatovratskii in Distributed

Индекс нужен для нормализации, я считаю.
Типа чтобы леммы искать, вот это всё.... то есть вопрос скорее оптимизации процесса поиска, чем оптимизации хранения.

источник

20:50пожаловаться #15

БГ

Бензофуран Гетероцик... in Distributed

(хватит локального SQLite с сообщениями и прочей суетой)

источник

20:51пожаловаться #16

АЖ

Алексей Жалнин... in Distributed

там выше была жалоба, что "обработка" сообщения - это плохо
а тут мы вынуждены обрабатывать перед построением индекса

источник

21:00пожаловаться #17