С
Нет разницы в результатах. Конечно, это может быть и вправду так. Но хотелось бы убедиться
Какой параметр вы сравнивали? Что, собственно, отличалось?
Size: a a a
2021 January 24
AS
Вы начали АБ тест делать, потому что реально в чем-то в потолок упёрлись? Или просто все делают — и мы будем?
Нужно было сравнить 2 цп на одной аудитории. ЦП принципиально разные, а результат одинаковый
С
Нужно было сравнить 2 цп на одной аудитории. ЦП принципиально разные, а результат одинаковый
ЦП? УТП в смысле?
AS
ЦП? УТП в смысле?
Да, оно
С
Нужно было сравнить 2 цп на одной аудитории. ЦП принципиально разные, а результат одинаковый
Результат в чем выражался? Клик, подписка, лид?
AS
Результат в чем выражался? Клик, подписка, лид?
Тестировали в лид-формах. Результат - лиды
С
Нужно было сравнить 2 цп на одной аудитории. ЦП принципиально разные, а результат одинаковый
Креативы и тексты в целом были одинаковые, отличия только в оффере?
AS
Креативы и тексты в целом были одинаковые, отличия только в оффере?
Креативы, кстати, тоже были разные. Не только оффер
С
Креативы, кстати, тоже были разные. Не только оффер
Тогда тест недостоверный. Отличаться должно только то, что тестируете.
С
Хотя всеобщие игры в АБ тестирование и гипотезы редко имеют смысл, если трафика мало или спрос узкий.
M
Хотя всеобщие игры в АБ тестирование и гипотезы редко имеют смысл, если трафика мало или спрос узкий.
+
важен классический дизайн эксперимента )
важен классический дизайн эксперимента )
AS
Тогда тест недостоверный. Отличаться должно только то, что тестируете.
Ну да, вы правы. Поменяем только текст
AS
Хотя всеобщие игры в АБ тестирование и гипотезы редко имеют смысл, если трафика мало или спрос узкий.
А как тогда проверять, если аудитория такая? Все равно же нужно знать, что лучше заходит
С
А как тогда проверять, если аудитория такая? Все равно же нужно знать, что лучше заходит
ИМХО факторов вообще невероятно много, чтобы верить результатам АБ. Можно спросить коллег, отправить действующим клиентам, собрать фокус-группу, выбирать считалочкой.
С
Считалочка ничуть не хуже прочих вариантов...
AS
а что вообще думаете об автоматизированных аб тестах в фб? стоит ли им полноценно доверять? даже если аудитория хорошая
С
а что вообще думаете об автоматизированных аб тестах в фб? стоит ли им полноценно доверять? даже если аудитория хорошая
Я бы предложил откатиться назад и начать разговор об инструментах с того, с каким продуктом и рынком имеете дело
AS
Я бы предложил откатиться назад и начать разговор об инструментах с того, с каким продуктом и рынком имеете дело
коттеджный поселок, дома.
начали с того, что стали выявлять сегменты и их проблемы на текущих клиентах. например, аудитория "молодая семья", которые купили дом, когда в квартре стало тесно. у них определенные требования к поселку.
мы и стали тестировать на этой аудитории. показывали им стандартный креатив "дом+участок от 9,8 млн" и новый креатив "поселок со школой и детсадом" (там тоже была плашка с ценой).
мы верили в гипотезу, что новый креатив на молодую семью будет работать лучше, но по факту автоматизированный аб тест показал, что креативы для данной аудитории одинаковые
начали с того, что стали выявлять сегменты и их проблемы на текущих клиентах. например, аудитория "молодая семья", которые купили дом, когда в квартре стало тесно. у них определенные требования к поселку.
мы и стали тестировать на этой аудитории. показывали им стандартный креатив "дом+участок от 9,8 млн" и новый креатив "поселок со школой и детсадом" (там тоже была плашка с ценой).
мы верили в гипотезу, что новый креатив на молодую семью будет работать лучше, но по факту автоматизированный аб тест показал, что креативы для данной аудитории одинаковые
С
коттеджный поселок, дома.
начали с того, что стали выявлять сегменты и их проблемы на текущих клиентах. например, аудитория "молодая семья", которые купили дом, когда в квартре стало тесно. у них определенные требования к поселку.
мы и стали тестировать на этой аудитории. показывали им стандартный креатив "дом+участок от 9,8 млн" и новый креатив "поселок со школой и детсадом" (там тоже была плашка с ценой).
мы верили в гипотезу, что новый креатив на молодую семью будет работать лучше, но по факту автоматизированный аб тест показал, что креативы для данной аудитории одинаковые
начали с того, что стали выявлять сегменты и их проблемы на текущих клиентах. например, аудитория "молодая семья", которые купили дом, когда в квартре стало тесно. у них определенные требования к поселку.
мы и стали тестировать на этой аудитории. показывали им стандартный креатив "дом+участок от 9,8 млн" и новый креатив "поселок со школой и детсадом" (там тоже была плашка с ценой).
мы верили в гипотезу, что новый креатив на молодую семью будет работать лучше, но по факту автоматизированный аб тест показал, что креативы для данной аудитории одинаковые
Я бы предположил, что учитывая необходимость в обилии точек контакта, стоимость и сложность принятия решения о сделке, вообще пофигу — что там на уровне фейсбучика происходит
С
Это же не единственный канал.