АО
Size: a a a
2020 August 05
A
Хотя, конечно, идея фильтрации колонки по строковому значению, которая гонит memcmp по непрерывному массиву очень заманчива...
A
number = Int32(123)
chars = reinterpret(UInt8, [number])
str = chars |> String
str = chars |> String штука доволно медленная, поскольку аллоцирует и копирует участок памяти. Но я думаю что для задачи автора вопроса это не критичноАО
Очень многое зависит от того, что потом с этим всем делать будут.
Если структура более-менее регулярная, лучше вообще не возиться с отдельными float/string, а сделать отдельную структуру описывающую эту регулярность и сложить все в вектор этих структур. Будет много аллокаций при чтении, зато потом будет удобно работать. Ну и в векторе память не будет фрагментирована, так что работать с ней можно будет быстро.
Если структура более-менее регулярная, лучше вообще не возиться с отдельными float/string, а сделать отдельную структуру описывающую эту регулярность и сложить все в вектор этих структур. Будет много аллокаций при чтении, зато потом будет удобно работать. Ну и в векторе память не будет фрагментирована, так что работать с ней можно будет быстро.
A
Это да. Я просто и на сях писал колоночную базу данных и на джулии пытался ее сотворить (удивился, кстати, насколько хорошую производительность дает джулия при этом). Поэтому я все вопросы про чтение из бинарника я рассматриваю под углом "прогонять запрос типа where по данным, хранящимся на диске с максиально возможной скоростью и с минимальным потреблением оперативы". Профессиональная дифформация 🙂
ВФ
добрый день. как объявить тип данных строка фиксированной длины?
Можно так
using StaticArrays
SVector{4}(Vector{Char}("absd"))
using StaticArrays
SVector{4}(Vector{Char}("absd"))
2020 August 06
VG
В Julia 1.5 чтобы распараллелить некоторый цикл по всем потокам, достаточно добавить Threads.@threads перед for ?
A
Народ, а может кто посоветовать книгу или курс типа "ML для разработчиков слегка подзабыших математику"? В смысле чтобы там было не обучение питону и "вызовите вот этот метод из Scikit и посмотрите что получилось", а была целостная картина того, как алгоримы ML работают, какие особенности, когда что имеет смысл применять.
A
Т.е. особенности алгоритмов можно и по исходникам смотреть, но хочется изначально как-то получить целостную картину предметной области
RS
Alexandr
Народ, а может кто посоветовать книгу или курс типа "ML для разработчиков слегка подзабыших математику"? В смысле чтобы там было не обучение питону и "вызовите вот этот метод из Scikit и посмотрите что получилось", а была целостная картина того, как алгоримы ML работают, какие особенности, когда что имеет смысл применять.
RS
В Julia 1.5 чтобы распараллелить некоторый цикл по всем потокам, достаточно добавить Threads.@threads перед for ?
https://docs.julialang.org/en/v1/base/multi-threading/
макрос
макрос
@threads был реализован ещё в ранних версиях. Конкретные нововведения см. по документации. Там стоят пометкиA
Спасибо!
RS
в этой книге математики мало. В лекция Воронцова математики существенно больше - http://www.machinelearning.ru/wiki/index.php?title=%D0%9C%D0%B0%D1%88%D0%B8%D0%BD%D0%BD%D0%BE%D0%B5_%D0%BE%D0%B1%D1%83%D1%87%D0%B5%D0%BD%D0%B8%D0%B5_%28%D0%BA%D1%83%D1%80%D1%81_%D0%BB%D0%B5%D0%BA%D1%86%D0%B8%D0%B9%2C_%D0%9A.%D0%92.%D0%92%D0%BE%D1%80%D0%BE%D0%BD%D1%86%D0%BE%D0%B2%29
A
в этой книге математики мало. В лекция Воронцова математики существенно больше - http://www.machinelearning.ru/wiki/index.php?title=%D0%9C%D0%B0%D1%88%D0%B8%D0%BD%D0%BD%D0%BE%D0%B5_%D0%BE%D0%B1%D1%83%D1%87%D0%B5%D0%BD%D0%B8%D0%B5_%28%D0%BA%D1%83%D1%80%D1%81_%D0%BB%D0%B5%D0%BA%D1%86%D0%B8%D0%B9%2C_%D0%9A.%D0%92.%D0%92%D0%BE%D1%80%D0%BE%D0%BD%D1%86%D0%BE%D0%B2%29
На первый беглый взгляд выглядит круто. Книга как быстрый способ въехать в предметную область целиком, а у Воронцова можно по конктретным методам глубже идти в математику. Спасибо еще раз
KT
Флах мне кстати очень унылым показался, видимо проблемы с переводом...
Есть на мой взгляд более удачный Бишоп с очень свежим переводом на русский
Есть на мой взгляд более удачный Бишоп с очень свежим переводом на русский
E
Флах не очень, да. Сам Воронцов в своих лекциях как введение советует книгу Домингос "Верховный алгоритм"
E
Ещё есть вот такое бесплатное введение в математику для ML: mml-book.github.io
E
Из наших - Вьюгин Мат основы ML. Первая вот в этом списке: https://m.habr.com/ru/post/464871/
