В целом, никакого паттерна или доки нет.
Это просто здравый смысл.
1) Вы генерируете мусорные данные на проде.
2) Портите аналитику.
3) Можете триггернуть возникновение лишних проблем в продакшене.

В целом, как и любое «тестировать на проде» это так себе план, потому что зачем, если есть тестовые окружения?

При этом если у вас есть ответ на вопросы «зачем?», «почему не сделать этого на тестовом контуре?» и «точно ли это не будет создавать проблем другим людям?», то почему бы и нет.

Ну и опять же, автотесты автотестам рознь.
Одно дело - запустить базовый healthcheck на проде, что бы убедиться что оно поднялось и работает (хотя все равно есть более приятные способы это делать).
Другое дело - запустить swarm из 18 тысяч автотестов, которые просто нагенерят мусора в продакшене ради непонятно чего.

я сам за здравый смысл описаный выше. Придерживаюсь практики прогон автотестов на like prod окружении. Мне для заказчика необходимо донести это понимание. Ну и некий хелф чек, может что то поменялось. 🙂

меняется только кейс в котором проект находится. Чаще всего на проде тесты действительно не гоняют - ибо описано выше . Но бывает что гоняют. бывает даже что гоняют овер дофига. Если порча статистик всяких заказчику фиолетова а протестить им надо и именно на прод. иначе не смогут отчет какой-нить заапрувить и тд.  все от конкретной ситуации зависит.

ок ок, спс

Знак loading висит именно в приложении? Спиннер загрузки крутится? Посмотрите на отправляемые запросы после запуска сервиса на Android, также посмотрите, что выдаёт logcat

Low memory killer выгрузил из памяти, при восстановлении приложения сбоит какое-то activity

Смотреть логи надо

@luckyisname @polishvodka спасибо большое !

А подскажите, пожалуйста, у кого был опыт устройства на работу напрямую к заказчику (без прокладки в виде аутсорсинговых компаний и тд) - как у вас это происходило, и как вообще это грамотно сделать?

После того как в аутсорсе поработал на этого заказчика?

Приветы. А есть у кого таски для бета тестировщиков? Есть банда студентов, они были бы рад поработать хорошо и бесплатно. Штук 500 для начала)

Привет! Есть здесь кто тестирует ТВ девайсы? Слышали об Suitest ? Что хорошего/плохого ?

Ну проще по типу Янга платформу сделать. Что Яндекс игнорирует, дать доступ сторонним

На ТВ тестирую приложения. Ну платформ видь там много

Да, Вот соответственно мой вопрос о туле Suitest, который даёт возможность писать сценарии для большинства платформ одновременно (без знания какого либо языка программирования). У нас в компании начали эту тему обсуждать... я уже начала писать тесты на appium/java. Так вот хочу знать насколько выгодно для компании, так чтоб без работы не остаться, ибо не хочется деградировать играясь в хай-левел тулы.

Никакого паттерна или доки нет. Зависит от того зачем вам это нужно или не нужно. Встречался с такой практикой в солидных компаниях.

Мотивация: апдейт одного прода означает апдейт для 3-15 зависящих от него фронтов. Компонентов много, они сложные, Юзеров много, денег много. Стояла задача прогнать на каждом фронте смоук чтобы проверить что основной функционал не отвалился.

Где можно поучиться правильному описанию чек листов? Или курсы какие нибудь есть по ним