ВК
10 лямов действительно фигня
Size: a a a
2019 December 23
A
угу, ничего особенного, например заказы в интернет-магазине
C
у меня десятки миллионов строк джойнятся, фильтруются, группируются и присваются через
:= очень даже быстрооказалось нет
PU
код-то и бенчмарки покажите, прежде чем такие громкие утверждения делать
C
а щас спать
C
завтра покажу
PU
да воля ваша
сразу скажу, если вы используете for + rbind, то почти сто процентов, что вы делаете это неправильно
сразу скажу, если вы используете for + rbind, то почти сто процентов, что вы делаете это неправильно
C
Что там можно сделать неправильно в таких простых операторах
PU
работу с памятью там можно сделать неправильно
PU
наращивание таблицы в цикле через rbind вызывает копирование объекта, что при больших таблицах увеличивает требуемое время на операцию
C
наращивание таблицы в цикле через rbind вызывает копирование объекта, что при больших таблицах увеличивает требуемое время на операцию
Как по другому наращивать ?
А[
PU
через lapply + rbindlist
либо через преаллокацию памяти (создаете пустую таблицу нужного размера) а потом в нее по индексу вставляете строки
либо через преаллокацию памяти (создаете пустую таблицу нужного размера) а потом в нее по индексу вставляете строки
PU
я предпочитаю первый вариант
А[
Cocos
Как по другому наращивать ?
Будет код - будут мысли
PU
но да, будет код - будут более конкретные рекомендации
C
но да, будет код - будут более конкретные рекомендации
Сам код я не предоставлю ,много переменных ,которые наполняются другими функциями ,лучше завтра напишу шаблон для понимания
C
Шас лежу с телефоном
PU
само собой, нужен не сам ваш прод-код, а минимальный пример, демонстрирующий проблему
А[
Cocos
Шас лежу с телефоном
Я, надо признаться, тоже люблю полизать шасси с телефоном, не переживайте