d🇳
Видишь к чему все идет
Size: a a a
2021 August 14
d🇳
А если там фотки дохлого голубя блобом
DE
Что такое датасеты?
d🇳
Пакет с пакетами
d🇳
В которых данные
DE
Почему М-М?
DE
Зачем датасеты серверам?
d🇳
2 разных сервера могут обрабатывать один и тот-же датасет или вернуть один и тот-же
d🇳
И в этом собственно и суть их работы
DE
Данные входящие: нужна схема
DE
Какой ЯП на беке?
DE
В каком виде приходят данные?
d🇳
JSON [{name:"s228",addr:"2.28.2.28",port:228,data:[{name: "kekw", type: "kekw", data: "kekw", time: 228},{name: "kekw", type: "kekw", data: "kekw", time: 228},{name: "kekw", type: "kekw", data: "kekw", time: 228}]}]
d🇳
На бэке принимающей стороны NIM, на бэке выдающей JAVA, но суть одна из JSON иерархии построить красивые таблицы
d🇳
Ну и собственно сделать инсерт сервера и датасетов любой дурак может, а чтобы при существующем датасете он вместо инсерта возвращал id существующего
d🇳
Тоесть совпадающего с ним всем кроме id
d🇳
Это уже нужно в оперативе держать все датасеты либо долбить базу каждый insert
AV
Для подобной задачи на базе 30kk+ записей (поисковик файлов по фтп/dc/smb/etc. ) лет 15 назад я прикручивал внешний полнотекстовый поиск используя sphinx. Почитайте про него, там много разных плюшек ибо он под это и заточен
DE
Нужно разбирать JSON с помощью ЯП и генерировать из них CSV файлы, наполняя каждый файл данными за определённый временной интервал. Для импорта же использовать https://dev.mysql.com/doc/refman/8.0/en/load-data.html
DE
Есть пример решения вопроса ключей связанных таблиц,, но там правда не CSV а дамп генерится