Size: a a a

Архитектура данных

2020 October 08

А

Александр in Архитектура данных
Переслано от Александр
Компания SmartDataLab ищет Data Analyst Architect!

Требуемый опыт работы: 3-5 лет на схожих позициях (бизнес аналитик, аналитик данных)
Полная занятость, удаленная работа
Заработная плата: 180’000-250’000 руб.

Обязанности:
1. Разработка новых, международных проектов глобального значения, участие в тестировании и развертывании
2. Разработка архитектурных решений
3. Контроль над внедрением технических решений

Вам предстоит:

1. Разрабатывать распределенные высоконагруженные информационные системы;
2. Разрабатывать объекты бизнес-логики и эффективные методы для доступа к данным;
3. Оптимизировать скорость обращения к данным.

Наши ожидания:

1) Знание современных колоночных БД, in-memory DB.
2) Глубокое знание SQL, знание Python на высоком уровне.
3) Отличное знание математики (теория вероятностей и мат. статистика, методы оптимизации) алгоритмов и структур данных.
4) Понимание основных концепций машинного обучения.
5) Навыки работы с большими объемами данных.
6) Опыт бизнес-анализа от 1 года.
@alextsarev
источник

А

Александр in Архитектура данных
Переслано от Александр
Компания SmartDataLab ищет BI Developer!

Требуемый опыт работы: от 2-х до 5-и лет.
Полная занятость, удаленная работа
Заработная плата: 120’000-180’000 руб.

Обязанности:
1. Разработка новых, международных проектов глобального значения, участие в тестировании и развертывании
2. Разработка архитектурных решений
3. Контроль над внедрением технических решений

Вам предстоит:

1. Разрабатывать распределенные высоконагруженные информационные системы;
2. Разрабатывать объекты бизнес-логики и эффективные методы для доступа к данным;
3. Оптимизировать скорость обращения к данным.

Наши ожидания:

1) Опыт работы с BI-инструментами: Tableau, Power BI.
2) Опыт UI/UX от 2-х лет.
3) Опыт работы с современными колоночными базами данных, noSQL, in-memory DB.
4) Опыт бизнес-анализа.
@alextsarev
источник

e

er@essbase.ru in Архитектура данных
LinkedIn выпустила релиз системы каталогизации данных DataHub 0.5.0 https://opennet.ru/53855/
источник

e

er@essbase.ru in Архитектура данных
* если кто побежит пробовать - расскажите какое оно ,)
источник

VS

Vladislav 👻 Shishkov... in Архитектура данных
Поставьте и посмотрите
источник

VS

Vladislav 👻 Shishkov... in Архитектура данных
Нам не понравился, свои тараканы в гуи, слишком большой стек, который можно было бы сократить, если учесть, как это работает
источник
2020 October 19

e

er@essbase.ru in Архитектура данных
Кто нибудь знает что такое автотесты  для БД ?
источник

KO

Konstantin Orzhekhov... in Архитектура данных
Слишком обобщенный вопрос
источник

KO

Konstantin Orzhekhov... in Архитектура данных
Как можно автоматизировать тесты, выполняемые в субд? Или в принципе что модно автоматизировать в субд?
источник

KO

Konstantin Orzhekhov... in Архитектура данных
Мы автоматически генерируем тесты на проверку дубликатов и нот налл и запускаем после заливки данных
источник

MV

Mitya Volodin in Архитектура данных
Konstantin Orzhekhovsky
Как можно автоматизировать тесты, выполняемые в субд? Или в принципе что модно автоматизировать в субд?
хм. Вообще-то можно. Это довольно обширное направление в Database research среде. Оно пересекается с self-managed DB темой очень сильно и пространства для творчества там тоже очень много.
источник

MV

Mitya Volodin in Архитектура данных
Кроме целостности данных ещё можно гонять через тесты физику хранения (модель), метрики обращения к ресурсам, нагрузку запросов, инфраструктурные сервисы общего направления (доступность аутентификации), а ещё можно тестировать эффективность вспомогательных структур вроде индексов или проекций
источник
2020 October 20

e

er@essbase.ru in Архитектура данных
Mitya Volodin
Кроме целостности данных ещё можно гонять через тесты физику хранения (модель), метрики обращения к ресурсам, нагрузку запросов, инфраструктурные сервисы общего направления (доступность аутентификации), а ещё можно тестировать эффективность вспомогательных структур вроде индексов или проекций
У вас нет методик которые можно расширить? Или какие принципы используете? . У меня основной топик как покрыть тестамии Легаси, которое можно рассматривать как черный ящик.
источник

MV

Mitya Volodin in Архитектура данных
er@essbase.ru
У вас нет методик которые можно расширить? Или какие принципы используете? . У меня основной топик как покрыть тестамии Легаси, которое можно рассматривать как черный ящик.
Не очень понял запрос. Легаси-что? Легаси-данные или процессы?
источник

e

er@essbase.ru in Архитектура данных
процессы
есть унаследованный pl-sql который нужно покрыть тестами перед масштабной оптимизацией
источник

SL

Sergey Lukin in Архитектура данных
er@essbase.ru
процессы
есть унаследованный pl-sql который нужно покрыть тестами перед масштабной оптимизацией
что то такое смотрели - https://github.com/utPLSQL/utPLSQL ?
источник
2020 October 21

AP

Anton Polyakov in Архитектура данных
в итоге кто-нибудь пробовал? я локально ставил - не понравилось то что lineage не было (месяца 4 назад), сейчас вроде допилили - интересно на каком уровне оно стало
источник
2020 October 22

MV

Mitya Volodin in Архитектура данных
Скинул линк, называется. Народ всё прибывает ))
источник

e

er@essbase.ru in Архитектура данных
Это хорошая новость?)
источник

MV

Mitya Volodin in Архитектура данных
Ну неплохая ) ПОтенциально сообщество расширяется
источник