Size: a a a

2018 October 30

S

Sergei in QA Сибирь
1) для нагрузки есть отдельные стенды и четкий список ресурсов которые должны нагружаться
2) для полной регрессии есть автотесты и там индивидуальные стеки
3) для акцептанса набор демок по фичабранчам
источник

VR

Vitaliy Roshchupkin in QA Сибирь
А разве может быть такое, что функциональный автотест на стейджинге проходит, а на проде - нет?
источник

VR

Vitaliy Roshchupkin in QA Сибирь
(минус нестабильности)
источник

S

Sergei in QA Сибирь
а зачем "минус", мы бы их тоже хотели отлавливать. Это ведь тоже задача мониторинга ловить такое.
источник

S

Sergei in QA Сибирь
развернуть честный стек с нуля, у нас занимает порядка часа. Для автотестов это долго очень. Поэтому мы идем на ряд компромиссов. Где-то используются моки и заменители. В демках есть шаренные ресурсы и там они технически могут друг на друга влиять, мы это допускаем. Прод же он абсолютно отдельно. И есть нюанс еще, что только там билды могут работать неделями. А значит mttf тестирование у нас по факту идет в проде 🙂 Но это уже компромис, мы не можем ждать результаты тестирования неделями
источник

AV

Alexei Vinogradov in QA Сибирь
VVM
Да вы чё, в банкинге не зайдёт такое, @alexejv скажи, практикуется такое в финтех, не ?!
кто меня в суе помянул?)
источник

V

VVM in QA Сибирь
😝
источник

AV

Alexei Vinogradov in QA Сибирь
Про что вообще вопрос? Там дискуссия какая-то длинная, не прочитал
источник

V

VVM in QA Сибирь
Тестирование на проме, мишин критикал систем
источник

AV

Alexei Vinogradov in QA Сибирь
на проде?
источник

V

VVM in QA Сибирь
Дыа
источник

VR

Vitaliy Roshchupkin in QA Сибирь
Sergei
развернуть честный стек с нуля, у нас занимает порядка часа. Для автотестов это долго очень. Поэтому мы идем на ряд компромиссов. Где-то используются моки и заменители. В демках есть шаренные ресурсы и там они технически могут друг на друга влиять, мы это допускаем. Прод же он абсолютно отдельно. И есть нюанс еще, что только там билды могут работать неделями. А значит mttf тестирование у нас по факту идет в проде 🙂 Но это уже компромис, мы не можем ждать результаты тестирования неделями
Спасибо, интересно было.
источник

AV

Alexei Vinogradov in QA Сибирь
а что считать мишн-критикал?
источник

V

VVM in QA Сибирь
Систему к которой предъявляется надежность 99.99, система переводов например ?
источник

V

VVM in QA Сибирь
Процессинг
источник

V

VVM in QA Сибирь
Эмиссия
источник

AV

Alexei Vinogradov in QA Сибирь
в целом считаю, что на проде всегда можно тестирировать, нужно только проявлять (это секретное знание я только в этом чате передам) - здравый смысл.
источник

V

VVM in QA Сибирь
Короче дойчеподобные операции🙃
источник

V

VVM in QA Сибирь
Ну выше из переписки, я так понял ребята хотят автотесты пользовательских сценариев гонять, вот
источник

AV

Alexei Vinogradov in QA Сибирь
например банкинг на проде сам бог велел тестировать, я первым делом со своего клиентского акка проверю, как работает новая функция 😃
источник