I
Если уже есть одно решение, второе нужно внедрять?
Ну не все так очевидно, у нас очень много решений уже есть, так что есть из чего выбрать. В том числе и EKL не проблема использовать
Size: a a a
2020 January 15
d
Ну не все так очевидно, у нас очень много решений уже есть, так что есть из чего выбрать. В том числе и EKL не проблема использовать
Понятно
I
Понятно
Ну и в случае эластик все-равно прийдется напильником дорабатывать :)
I
Больше интересно сталкивался кто-нибудь с похожими задачами - сбором метаданных из датасайнс скриптов. Я подумал сразу об использовании пайплайнов типа снейкмейк или cwl.
SB
Больше интересно сталкивался кто-нибудь с похожими задачами - сбором метаданных из датасайнс скриптов. Я подумал сразу об использовании пайплайнов типа снейкмейк или cwl.
У вас это ad-hoc runs или как-то полноценно операционализированные? Как их оркеструете?
I
У вас это ad-hoc runs или как-то полноценно операционализированные? Как их оркеструете?
Каждый датасайнс использует свой набор скриптов, который изменяет исходя из необходимости. При этом все обязаны использовать либу для логирования. А либа собирает метаданные и сохраняет в файл или БД. Так что оркестрации как таковой нет.
SB
Хорошо, тогда другой вопрос: а зачем тогда что-то логгить?
AN
powerbi для визуализации не прдойдет?!
I
Хорошо, тогда другой вопрос: а зачем тогда что-то логгить?
Ну скажем так это бизнес-требование основанное на требовании регулятора :-)
I
powerbi для визуализации не прдойдет?!
Ну... даже не знаю, просто не сильно хочется городить свой велосипед с БД и дагбордами сверху. Потом надо будет его ментейнить и как-то с ним работать.
K
powerbi для визуализации не прдойдет?!
Визуализации чего ?
AN
Kostya
Визуализации чего ?
запуск скрипта для анализа данных
AP
погодите. Вы скрипты откуда запускаете? Из шелла?
AP
если не из powerbi и прочих оболочек
K
запуск скрипта для анализа данных
Что вы анализирвоать хотите ?
VH
В СССР ТРИЖДЫ уничтожались аналитические центры. Например ЛаСУРС, откуда вышли школа устойчивого развития и концептуальный подход.
Зачем уничтожались? Есть гипотеза, но об этом долго.
Бывшие работники ЛаСУРС смогли сохранить идеи, но не наработки. Все материалы лаборатории были конфискованы комиссией которую направлял заместитель министра МВД СССР, на секундочку.
Так что сарказм ваш понятен - если такие мы умные, чому такие бедные? Но возможно (и есть такие прогнозы) всё ещё впереди.
Зачем уничтожались? Есть гипотеза, но об этом долго.
Бывшие работники ЛаСУРС смогли сохранить идеи, но не наработки. Все материалы лаборатории были конфискованы комиссией которую направлял заместитель министра МВД СССР, на секундочку.
Так что сарказм ваш понятен - если такие мы умные, чому такие бедные? Но возможно (и есть такие прогнозы) всё ещё впереди.
Тут без сарказма, напишите про остальные два
SB
Ну скажем так это бизнес-требование основанное на требовании регулятора :-)
Я даже боюсь представить 🧐
SK
Схоронил
AZ
Тут без сарказма, напишите про остальные два
Эдуард Пройдаков https://m.habr.com/ru/company/dataart/blog/463023/
Наконец, наверху стоял уже 86-й процессор. Поскольку мы думали, что это будет использоваться в САПР, уже тогда сделали 4 мегабайта видеопамяти. Это был 1982–1983 год, в мире таких машин не было. Поэтому ее везде встретили на ура, и тут же стали гробить и тормозить. На завод она попала только через 6 лет. Но даже на излете 45 тысяч тиража серия выдержала.
— Почему стали гробить?
— Потому что шла большая борьба. Были группы, которые считали, что здесь не должно быть хорошей вычислительной техники, и организованно саботировали ее внедрение. Я знаю массу примеров, не только нашей разработки, но и других, когда такие вещи случались.
Наконец, наверху стоял уже 86-й процессор. Поскольку мы думали, что это будет использоваться в САПР, уже тогда сделали 4 мегабайта видеопамяти. Это был 1982–1983 год, в мире таких машин не было. Поэтому ее везде встретили на ура, и тут же стали гробить и тормозить. На завод она попала только через 6 лет. Но даже на излете 45 тысяч тиража серия выдержала.
— Почему стали гробить?
— Потому что шла большая борьба. Были группы, которые считали, что здесь не должно быть хорошей вычислительной техники, и организованно саботировали ее внедрение. Я знаю массу примеров, не только нашей разработки, но и других, когда такие вещи случались.
