O
Size: a a a
2021 January 11
O
Лан, всё. срач яйца выеденного не стоит.
S
внес правки в своё утверждение.
ок, мир 🖐 я тоже против срача
O
ок, мир 🖐 я тоже против срача
👏
g
я читал всю переписку наискось, SSIS для меня умер еще в 2014 году, но в целом видно было что вы слишком глубоко воспринимаете легкое подтрунивание, тем более что вам все равно в итоге пытаются помочь
Добрый день.
А что вместо ссис для ETL задач используете, для workflow?
А что вместо ссис для ETL задач используете, для workflow?
KT
Добрый день.
А что вместо ссис для ETL задач используете, для workflow?
А что вместо ссис для ETL задач используете, для workflow?
все зависит от стэка, который используете, если у вас все просто и примитивно достаточно простеньких скриптов на Python/C#/Java что вы там используете или на худой случай хранимых процедур если нет знаний других языков програмирования
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
O
Добрый день.
А что вместо ссис для ETL задач используете, для workflow?
А что вместо ссис для ETL задач используете, для workflow?
Видел что многие крупные компании используют Oracle GoldenGate для этих нужд.
O
Но он стоит как...чугунный мост....
T
на сколько я знаю кто-то пользует Informatica
KT
на сколько я знаю кто-то пользует Informatica
очень много, но стоит она как хрустальный мост
KT
Видел что многие крупные компании используют Oracle GoldenGate для этих нужд.
он крутой, но мост скорее платиновый чем чугунный
I
Тогда берите бесплатный airflow
O
он крутой, но мост скорее платиновый чем чугунный
Согласен 😊 не хотел искажать оригинального фразеологизма. К слову о крутости, мне как DBA, он порой доставлял серьёзные проблемы. За GG отвечал другой отдел. Иногда GG лочил лог транзакций своим подобием CDC и наступал апзац. Даже самая новая версия иногда такое допускала. Умирал агент GG и переставал двигать точку отсечки в CDC
KT
Согласен 😊 не хотел искажать оригинального фразеологизма. К слову о крутости, мне как DBA, он порой доставлял серьёзные проблемы. За GG отвечал другой отдел. Иногда GG лочил лог транзакций своим подобием CDC и наступал апзац. Даже самая новая версия иногда такое допускала. Умирал агент GG и переставал двигать точку отсечки в CDC
Информатика в свое время более веселые вещи на одном из проектов Вымпелкома тварила, все ETL средства это комбайный, что-то делают очень хорошо, что-то средне, ну а что-то лучше в них не бросать совсем
g
Спасибо)
S
все зависит от стэка, который используете, если у вас все просто и примитивно достаточно простеньких скриптов на Python/C#/Java что вы там используете или на худой случай хранимых процедур если нет знаний других языков програмирования
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
то есть вы отказались в свое время от SSIS и теперь пишите скрипты на Python и C#???
Или я что-то не так понял
Или я что-то не так понял
СК
Друзья, а поделитесь, пожалуйста, опытом, какое средство используете для наблюдения за статусами джобов на множестве инстансов? Пробовал использовать SCOM и его стандартные дашборды, но они не очень удобные.
А
Друзья, а поделитесь, пожалуйста, опытом, какое средство используете для наблюдения за статусами джобов на множестве инстансов? Пробовал использовать SCOM и его стандартные дашборды, но они не очень удобные.
в студии есть возможность мультисервер query - запускать запрос на нескольких серваках сразу,
ну и мониторишь sys.sql_jobs или как там)
ну я для себя накалякал какието свои приложухи для мониторинга - телеграм бот и десктоп - шлют сообщение когда чтото падает.
ну и мониторишь sys.sql_jobs или как там)
ну я для себя накалякал какието свои приложухи для мониторинга - телеграм бот и десктоп - шлют сообщение когда чтото падает.
А
все зависит от стэка, который используете, если у вас все просто и примитивно достаточно простеньких скриптов на Python/C#/Java что вы там используете или на худой случай хранимых процедур если нет знаний других языков програмирования
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
из бесплатных ETL средств рекомендую присмотреться к https://www.talend.com/products/data-integration/ (если бы больше времени было на тестирование возможно бы выбрали его), мы используем https://habr.com/ru/post/465299/ (но это если Python активно используете и тоже своих особеностей хватает)
из всего многообразия реально выбрать тяжело, в свое время более 20 штук тестировали, но реально работающих и покрывающих наши нужды из бесплатных не так уж и много в итоге оказалось
а почему хранимки "на худой случай"?
разве не лучше не городить зоопарк технологий а тянуть все в одной среде?
имхо скуль легче в поддержке
разве не лучше не городить зоопарк технологий а тянуть все в одной среде?
имхо скуль легче в поддержке