ИО
все отработает на ура
Size: a a a
2019 August 20
DS
Да, к утру
ИО
не согласен
DS
Ок. Но я точно знаю что производительность в таком случае на несколько порядков ниже
DS
Там много причин: и время на разбор каждого запроса и то что, например, индексы нужно перестраивать после каждого запроса
DS
На тысяче записей это всё не очень критично, но вставке нескольких миллионов строк это разница на порядки
ИО
я честно не берусь спорить, поскольку у нас на работе все процессы реализуются по-возможности на уровне БД, чтобы исключить ситуацию, что сначала мы что-то должны обработать или получить на стороне. Но последний раз проблем с вставкой не было, при этом обьемы были очень большие.
ИО
ну и бд у нас не MySQL
DS
возможно в этом всё дело)
ИО
Dmitriy Shashkin
возможно в этом всё дело)
Пообщались тут с коллегами... БД какая?
DS
Пообщались тут с коллегами... БД какая?
Mysql, myisam
ИО
Dmitriy Shashkin
Mysql, myisam
Грузите через gui или load data infile... ?
ИО
У нас была похожая проблема со справочником недействительных паспортов. И мы игрались с настройками разделителей
DS
Через load data infile
DS
Там вариантов особых не вижу. Можно ESCAPED BY поставить пустым, но тогда mysql неправильно воспринимает /n (null)
DS
Реально проблема не ограничена mysql, даже когда из python пишешь в csv а потом считываешь обрабтно - получаются другие данные
DS
Потому что https://bugs.python.org/issue12178
ИО
Dmitriy Shashkin
Реально проблема не ограничена mysql, даже когда из python пишешь в csv а потом считываешь обрабтно - получаются другие данные
Это да. Но вариантов у вас не так много.
2019 August 21
P
ребят, не могу придумать как посчитать количество сессий с поиском, есть отдельно события по сессиям и поискам, таймштампы для поиска и таймпштамп для начала и конца сесии. Может быть кто-то сталкивался с такой задачей?