AP
(мб вопрос привычки)
Size: a a a
2021 June 15
АО
Хмм, тогда да, наверное аналогов нет.
IY
Ну лично мне не очень понятно, как поступать, если я, например, хочу использовать несколько функций агрегирования, а также сделать агрегирование по нескольким переменным
АО
Хотя можно свой собственный setindex для датафреймов спиратить наверное.
AP
как человек почти не юзавший R могу сказать, что нигде не встречал такого синтаксиса, ни в питоне ни в джулии
IY
Ну data.table это особая штука. Хотя очень быстрая, щёлкает таблицы в 20 млн строк как семечки
IY
Но всё-таки, никто не подскажет, как делается вот это?
IY
Переслано от Igor Yegin
Ну лично мне не очень понятно, как поступать, если я, например, хочу использовать несколько функций агрегирования, а также сделать агрегирование по нескольким переменным
AP
https://h2oai.github.io/db-benchmark/ датафреймы в джулии местами быстрее, местами медленнее - но сопоставимы
IY
А как в Julia можно агрегировать по пользовательским функциям?
IY
Если это не какая-нибудь простая вещь типа sum или mean?
AP
ровно так же, как и sum :) нет разницы, встроенная функция или своя
AP
примерно так - правда это не с датафреймами, а с обычными таблицами
@p begin
table
group((;_.a, _.b))
map() do gr
# любые вычисления с массивом gr
# ...
end
end
АО
Без видео не понять :-)
AP
в dataframes.jl я подзабыл детали уже, так что может с ним кто-нибудь другой пример напишет
АО
Мне вот этот туториал нравится, но он довольно длинный
https://bkamins.github.io/julialang/2020/12/24/minilanguage.html
https://bkamins.github.io/julialang/2020/12/24/minilanguage.html
DP
этот синтаксис специально сделан таким, чтобы можно было запросы компилить. Тип ситуаций, когда автоматически определяется, что уу таблички с 1000 колонок, нуужно взять пять, а остальные гонять нет смысла. Отсюда частично и скорость data.table, которую сложно превзойти
A
как человек, юзающий R почти 10 лет, могу сказать, что
[ - такая же функция, как и все остальные, то есть разницы с точки зрения языка нет вообще никакой между тем, что происходит в обоих вариантах в коде нижеA
скорость
data.table связана не с каким-то специфическим синтаксисом, а с внутренней реализацией операций (которые по большей части не на R написаны, а на самом настоящем С++)