ES
Хотелось бы получить механизм такой, который позволял решать задачу не загружая весь файл в память
Size: a a a
2020 May 28
НК
есть вариант по строками читать, если там джсоны в 1 строку
ES
Там Jspn в формате
[{
type1: [],
type2: [],
type3: []
},
type1: [],
type2: [],
type3: []
}]
[{
type1: [],
type2: [],
type3: []
},
type1: [],
type2: [],
type3: []
}]
ES
В этом то и проблема =( Что по строке не получается
S🛸
Хотелось бы получить механизм такой, который позволял решать задачу не загружая весь файл в память
Опиши нормально задачу
НК
может есть какая то библиотека, которая может на лету парсить
r
Может ли один сервер на express обслуживать несколько доменов?
Сорри что перебил
Сорри что перебил
НК
но вообще у меня база на 17к элементов джон 3 мб весит. Как у тебя 2гб боюсь даже представить
S🛸
Может ли один сервер на express обслуживать несколько доменов?
Сорри что перебил
Сорри что перебил
Может
ES
Опиши нормально задачу
ES
И мне нужно дописывать этот файл переодически
r
Может
Напишите подробнее почему?
S🛸
но вообще у меня база на 17к элементов джон 3 мб весит. Как у тебя 2гб боюсь даже представить
На 5 миллионов элементов - легко
S🛸
Напишите подробнее почему?
Потому что нет никаких ограничений на это
НК
ок, нарисуй структуру файла. И куда писать нужно
ES
[0].pvzs - например туда нужно будет дописать
r
Потому что нет никаких ограничений на это
Подробно
НК
[0].pvzs - например туда нужно будет дописать
навскидку можно читать файл потоком и загружать в память json частями, парсить частями, периодически очищая, создавать какие то метки, потом записывать в кусок, и заново потоком читать и в нужном месте вставить измененный кусок. Но это морока еще та
ES
Угу( Очень геморно понять где закончился объект например
НК
все скобки вручную считать. И все равно может быть очень большой кусок файл