IS
джава хороша набором библиотек, но если мерять по этому критерию мы к nodejs скатимся
Size: a a a
2017 October 20
МК
можно подумать что на джаве jni нет
там очень ограниченное использование для него. для большинства хватает unsafe и более творческого переложения java.util.concurent
IS
там очень ограниченное использование для него. для большинства хватает unsafe и более творческого переложения java.util.concurent
равно как и nif для erlang
IS
все ведь знают что джва нужна чтобы xml перекладывать =)
МК
тут штампов много. у нас тут есть фанаты ноды в компании и они недавно обнаружили что почемуто они разобрать json размером больше 256 мб разобрать не могут.... а в нем они так любили конфиг хранить со всеми изменениями
МК
у меня есть небольшой вопрос. есть ли у кого то опыт использования разреженных множеств довольно больших размеров?
МК
у меня есть несколько костылей к либам на java, С но изменять их под свои задачи и делать базовые вещи вроде работы над множествами там довольно тяжело
МК
возможно находили либы для этого
DF
у меня есть небольшой вопрос. есть ли у кого то опыт использования разреженных множеств довольно больших размеров?
А задача какая конкретнее? Что нужно от множеств?
kk
re
TT
добрый вечер)
МК
Есть бинарные множества признаков есть по свойству на одно множество. 1 если объект обладает свойством и 0 если нет. Множеств таких может быть несколько тысяч. Объектов свойства которых храним может быть несколько сотен миллионов. Типовые операции обладает ли объект набором свойств 1,2,3 и список объектов обладающим выбранным набором свойств
МК
Для первой задачи можно генерировать например фильтры блума и или подобные вещи по результатам второй операции. Работает хорошо. Но долгий пересчёт
МК
А вот со второй задачей уже сложнее
МК
Итого проблема с хранением, модификацией и очень тяжелые операции над множествами
МК
А задача какая конкретнее? Что нужно от множеств?
Я написал свой вариант на бинарях фиксированной длины и хранение в ets таблице только фрагментов с в которых есть объекты. Работает но потребляет много памяти и при бинарных операциях я не нашёл вариант как их делать нормально если не дробить на куски по 64 бита