IS
имеются ли у тебя сохраненные ссылки на инструкцию
Size: a a a
2020 June 08
RA
Можно в кишки efficientdet глянуть
RA
Или mmdetection
KA
Сегодня онлайн конференция по компьютерному зрению http://machinescansee.com/ начинается, регистрация бесплатна
Будет ли replay, не знаете?
RB
Будет ли replay, не знаете?
Предыдущие конференции они выкладывали тут https://www.youtube.com/user/VisionLabsChannel/videos, так что думаю, да
KA
Предыдущие конференции они выкладывали тут https://www.youtube.com/user/VisionLabsChannel/videos, так что думаю, да
Хорошо, Рахмет)
AA
Всем привет у нас есть NLP data scientists нужна помощь) задача вытащить имена на казахском
IS
Всем привет у нас есть NLP data scientists нужна помощь) задача вытащить имена на казахском
только черной работой)
К
есть вопрос скорее по data engeneering, есть датчики и к ним данные состоящие из двух частей: метадата и она не меняется и собственно данные датчиков, грубо говоря список float, как лучше организовать хранение таких данных? просто база в которой таблица с метадатой и для каждого датчика по id отделньо табличка с датой/временнем и показаниями или есть какой-то более правильный способ?
TC
есть вопрос скорее по data engeneering, есть датчики и к ним данные состоящие из двух частей: метадата и она не меняется и собственно данные датчиков, грубо говоря список float, как лучше организовать хранение таких данных? просто база в которой таблица с метадатой и для каждого датчика по id отделньо табличка с датой/временнем и показаниями или есть какой-то более правильный способ?
Сколько записей за день копится? У вас все в базу идёт сразу? Или сначала хранится как таймсериз в носиквеле?
TC
есть вопрос скорее по data engeneering, есть датчики и к ним данные состоящие из двух частей: метадата и она не меняется и собственно данные датчиков, грубо говоря список float, как лучше организовать хранение таких данных? просто база в которой таблица с метадатой и для каждого датчика по id отделньо табличка с датой/временнем и показаниями или есть какой-то более правильный способ?
Если ты хочешь сделать хранение в обычной БД, хочешь делать в 3НФ, то... отдельно метадату, сделай айдишник для счетчиков, и храни показания в таблице. Если за сутки у тебя данных много, то подумай о партицировании. Как партицировать будешь (день, мясяц, место установки и пр) - думай сам.
К
Сколько записей за день копится? У вас все в базу идёт сразу? Или сначала хранится как таймсериз в носиквеле?
пока не знаю, предположительно пока 100 датчиков и опросы пока не придумал какой интервал (нужно будет экспериментировать), но в дальнейшем будет расти
К
Если ты хочешь сделать хранение в обычной БД, хочешь делать в 3НФ, то... отдельно метадату, сделай айдишник для счетчиков, и храни показания в таблице. Если за сутки у тебя данных много, то подумай о партицировании. Как партицировать будешь (день, мясяц, место установки и пр) - думай сам.
спасибо!
К
Если ты хочешь сделать хранение в обычной БД, хочешь делать в 3НФ, то... отдельно метадату, сделай айдишник для счетчиков, и храни показания в таблице. Если за сутки у тебя данных много, то подумай о партицировании. Как партицировать будешь (день, мясяц, место установки и пр) - думай сам.
вообще сейчас мысль возникла, что можно будет сделать как Time Macine - последний день допустим самая большая частота, неделя - допустим раз в час, месяц - 4 раза в день и там уже можно так, как вариант
К
или допустим мин/макс/среднее/медиана
TC
Ну это тебе виднее. Просто такое не встречал в хранилищах данных. Можешь настроить, чтобы партицирование было ежечасным.
К
Ну это тебе виднее. Просто такое не встречал в хранилищах данных. Можешь настроить, чтобы партицирование было ежечасным.
угу, спасибо за наводку, теперь понятнее как можно оптимизировать