Ð
И иногда бывает быстрее для какого-нибудь недомагазина по меньшей мере разобраться с knex.
для магазина бывает проще взять джумлу
Size: a a a
2020 January 20
T
Он тоже даёт процедурные возможности поверх семантики SQL но в синтаксисе JS
T
Я работаю с действительно крупными данными, мне все это не подходит) типичный размер ответа 100к записей
T
Ð
я тоже, но они стали крупными :)
AK
Я работаю с действительно крупными данными, мне все это не подходит) типичный размер ответа 100к записей
У вас олап система?
Ð
Я работаю с действительно крупными данными, мне все это не подходит) типичный размер ответа 100к записей
оракл?
T
У вас олап система?
Нет.
T
Ð
оракл?
Постгрес.
T
У вас олап система?
Хотя в будущем будет да, но пока решаются другие задачи
T
Просто в геномике много чего было написано на перле и работает со строками. Я нашел способ представить те же самые вычисления в реляционной форме
T
И это в кучу раз быстрее
AK
Хотя в будущем будет да, но пока решаются другие задачи
Очень странно, система с запросами, возвращающие по 100к записей. У вас сколько запросов в минуту/секунду? Это же примерно по 100 мегабайт с одного запроса, если в одной записи несколько полей варчарных и таблица имеет около 20 полей.
И
Очень странно, система с запросами, возвращающие по 100к записей. У вас сколько запросов в минуту/секунду? Это же примерно по 100 мегабайт с одного запроса, если в одной записи несколько полей варчарных и таблица имеет около 20 полей.
запись = 1 мегабайт ?
И
1к записей = 1 мегабайт ? как-то многовато, я хз
T
Запросы производятся в ходе процесса аннотирования мутаций, например.
AK
1к записей = 1 мегабайт ? как-то многовато, я хз
Вообще, в среднем так и весят по моему опыту в основных таблицах, 1 поле varchar(1024) это уже 1КБ за строку. А там если 10 полей varchar(50) это уже пол килобайта.
T
И результатом является весь геном + интерпретация вариантов у конкретного человека
T
То есть это не долгоживущий процесс демон
И
Вообще, в среднем так и весят по моему опыту в основных таблицах, 1 поле varchar(1024) это уже 1КБ за строку. А там если 10 полей varchar(50) это уже пол килобайта.
отдавать 100к записей одним запросом как-то жирновато