MS
Аналогичный вопрос для тестнж, тоже выдает краш теста без деталей
Size: a a a
2021 December 13
cm
A
записываете экран
cm
movavi screen recorder
https://allsoft.ru/software/multimedia/utilities/movavi-screen-capture-for-mac/
https://allsoft.ru/software/multimedia/utilities/movavi-screen-capture-for-mac/
ES
Добрый день,
вопрос по полю Tags для automated тесткейсов 😊
предусловия: используется testng, на тестах в коде проставлены аннотации групп вида @Test(groups = {"Smoke", "Dashboard"}) и т.п.,
результаты тестов загружаются в Allure Testops
вопрос: есть ли какой-то способ вставить эти testng группы как Tags для automated тесткейсов в Allure Testops?
Или каким наиболее эффективным образом можно было бы добавить теги?
вопрос по полю Tags для automated тесткейсов 😊
предусловия: используется testng, на тестах в коде проставлены аннотации групп вида @Test(groups = {"Smoke", "Dashboard"}) и т.п.,
результаты тестов загружаются в Allure Testops
вопрос: есть ли какой-то способ вставить эти testng группы как Tags для automated тесткейсов в Allure Testops?
Или каким наиболее эффективным образом можно было бы добавить теги?
A
в junit5 все автоматически делается =)
ES
да в доке был пример для junit5, хочется понять как для testng правильнее сделать)
c
я бы что-нибудь типа IAnnotationTransformer попробовал
c
в нем взять все groups, и добавить через Allure.tags
МД
#testops Всем привет!
Кажется, нашел проблему при запуске тестов, используя в пайплайне withAllureTestPlan()
Выставлен такой фильтр
Но по итогу запускаются не все тесты по этому фильтру, около 7-10% тестов просто теряются, потому что не попадают в testplan.json, который подклатывается в дженкинсе при запуске тестопсом
Если вписывать этот фильтр при создании тестплана вручную - все нужные тесты находятся
Используем testNG. Заметил, что большинство пропадающих тестов - чем то похожи в названии методов, либо начаются, либо заканчиваются одинаково, либо имеют одну и ту же подстроку в названии. Пытался переименовывать методы - некоторые тесты начали появлятся, некоторые пропадать, в общем ситуацию не сильно это улучшило. AllureId у всех тестов выставлены выставлены в коде.
Кто нибудь с таким сталкивался? И в чем может быть проблема?
Кажется, нашел проблему при запуске тестов, используя в пайплайне withAllureTestPlan()
Выставлен такой фильтр
withAllureTestPlan(filter: '(status = "Active") and (automation = true)')Но по итогу запускаются не все тесты по этому фильтру, около 7-10% тестов просто теряются, потому что не попадают в testplan.json, который подклатывается в дженкинсе при запуске тестопсом
Если вписывать этот фильтр при создании тестплана вручную - все нужные тесты находятся
Используем testNG. Заметил, что большинство пропадающих тестов - чем то похожи в названии методов, либо начаются, либо заканчиваются одинаково, либо имеют одну и ту же подстроку в названии. Пытался переименовывать методы - некоторые тесты начали появлятся, некоторые пропадать, в общем ситуацию не сильно это улучшило. AllureId у всех тестов выставлены выставлены в коде.
Кто нибудь с таким сталкивался? И в чем может быть проблема?
ES
да, получилось) большое спасибо! 😊
MS
не уверен поможет ли, но проверь как тест сьюты (группы) описаны в тестах, была проблема что вместо groups = {"One", "two"} было {"one, two"}
МД
С этим проблем вроде нет(
Если запускать простым
Если запускать простым
withAllureUpload - никаких проблем не возникает, например2021 December 14
SF
@baevdm Подскажи пожалуйста, можно ли ожидать решения по багу https://github.com/allure-framework/allure2/issues/1208?
c
Засылай PR
c
Лично у меня на этот год уже плотненько по задачкам(
PP
Ребята, кто пользуется TestOps как вы поступаете, если у вас падает какой-то тест перед релизом, потому что поменялся функионал и поменять тест не успели? Меняете его на ручной в TestOps?
PP
ну или например поменялся какой-то селектор итд
АР
Если убрать слово TestOps - то получится вопрос куда то сюда @qa_ru :)
PP
вопрос именно как это в тестопс хендлить