Size: a a a

AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2

2020 December 14

D•

Dan • Captain in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Проведите пятницу на предновогоднем Дзен-митапе.

На Дзен-митапах мы традиционно обсуждаем рекомендательные системы. В этот раз немного сменим направление и обсудим наукоёмкие задачи — поговорим об обучении с подкреплением (reinforcement learning) и об атаках на модели. От Дзена будет история о том, как возникла задача ранжирования по сложной негладкой метрике, какие подходы в ней пробовали и что заработало лучше всего.

Кроме трёх докладов мы немного развлечём вас праздничной афтепати — нет, вам не придётся включать камеры и говорить, всё максимально комфортно и с подарками.

18 декабря, старт в 19:00 по Москве
Регистрация и описание докладов
источник
2020 December 15

DB

Dmitry Belkevich in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
всем привет. может кто сталкивался и в курсе, что тут можно сделать. пытаюсь установить детектрон2 на Windows 10
после дня 'уговоров' удалось до какой-то степени продвинуться, однако окончательно застопорился на пачке ошибок при сборке кудовским компилятором куска кода

   box_iou_rotated_cuda.cu
   c:/users/makuser/appdata/local/programs/python/python36/lib/site-packages/torch/include/torch/csrc/api/include\unordered_set(74): error C2248: std::list<c10::Symbol,std::allocator<c10::Symbol>>::_Alnode: невозможно обратиться к private typedef, объявленному в классе "std::list<c10::Symbol,std::allocator<c10::Symbol>>"

пробую делать по ману:

https://github.com/conansherry/detectron2/issues/19
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Всем привет. Вопрос по power bi. Поделитесь, пжс, опытом))
У меня есть большая таблица с двумя столбцами дат (покупка, продажа и)
У меня есть 2 варианта работы с ней:
1. Разделить ее на 2 части и тянуть от каждой связь к календарю (мне так удобнее)
2 . Оставить одну таблицу, использовать формулу userelationship с двумя связями к календарю.
Второй вариант неудобен, из-за большого кол-ва сложных формул.
Первый вариант значительно больше будет занимать ресурса? Или первый вариант тоже ок?
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
имхо - как проще, если работает, значит ок)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
ещё вопрос гибкости, будет ли что-то позже с этим
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
имхо - как проще, если работает, значит ок)
Просто со временим будет сильно увеличиваться база данных, хотелось бы один раз построить и больше не трогать)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
TanyaBat
Просто со временим будет сильно увеличиваться база данных, хотелось бы один раз построить и больше не трогать)
это из БД? Я думаю тогда данные сначала нужно подготавливать в БД (все таблички) и тянуть в БИ, и в БИ их связать уже
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
это из БД? Я думаю тогда данные сначала нужно подготавливать в БД (все таблички) и тянуть в БИ, и в БИ их связать уже
Бд веду не я, но я сейчас так и делаю, подготавливаю там и тяну, но аналитики разной много, поэтому все равно простыня большая нужна. Вот и думаю будет ли bi значительно сложнее ворочить 2 таблицы с меньшии кол-вом столбцов, или одну большую)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
а подключение квери или импорт?)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
в принципе я тоже сейчас задаюсь схожим вопросом, коллеги у нас предпочитают всё в 1 таблицу, но такое себе в итоге)
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
а подключение квери или импорт?)
Импортом, как понимаю квери такое не потянет, оно для других случаев
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
в принципе я тоже сейчас задаюсь схожим вопросом, коллеги у нас предпочитают всё в 1 таблицу, но такое себе в итоге)
Вот вот, еще для юзеров должно быть удобно(
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
так от импорта же модель становистя огромной?)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
у нас больше половины моделей на OLAP сидят
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
у нас больше половины моделей на OLAP сидят
Пойду погуглю, я о таком не слышала) в power bi?
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Ну, данные из OLAP берём, OLAP Отдельно формируется, думаю не нужно туда лезть - геморр, да и разрабатывать нужно будет)
источник

Z

Zondinho in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
да и технология уже старая
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Вроде быстро power bi работает с импортом около 1,5 млн строк в каждой таблице
источник

T

TanyaBat in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
Zondinho
Ну, данные из OLAP берём, OLAP Отдельно формируется, думаю не нужно туда лезть - геморр, да и разрабатывать нужно будет)
Не иду гуглить тогда)
источник

S

Stepan in AI / Big Data / Machine Learning 👮‍♂️ Protected by R2D2
У меня все через квери подключено с объемом  200-300 млн строк с кликхауса. Логи с огромным количеством необходимых ивентов. Нормально все работает вроде.
источник