Спасибо вам огромное Виктор! Я пришел на ваш канал после видео про пиксель. Вы смогли мне здоровски показать самый начальный этап, который я пропустил)
А в чем преимущество сплит-тестирования перед, скажем, дублем? За а/в тест фб накидывает 30-40% к срм, при том что обычный дубль даст те же результаты по стандартному срм, а пересечение аудиторий на периоде теста вряд ли случится (при нормальном размере выборки).
Преимущество сплит тестирования в том, что это - единственная возможность провести тестирование объективно. Детально разобран этот вопрос как раз начиная с 1:19.
@VictorFilonenko , добрый день. Спасибо большое за ценный контент! Но по сказанному возникает вопрос. Буду благодарен за пояснение. Из ваших слов: 1. При рекламе без сплит-теста у нас: 1.1. Возникает наложение. 1.2. FB включает механизм дедупликации и тем самым эффект наложения убирает. *Минусом дедупликации является то что нет стабильного показа (доставки) каждого из креативов. Хорошо. Понятно. ✅ Но ЗАТЕМ Вы рассказываете о том, что пересечение в аукционах достигает 63%. И тут есть противоречие! А именно: откуда возникает наложение(63%), если дудупликация его убирает? (пересечение и наложение, я так понимаю, это одно и тоже). Другими словами: так как все таки идёт реклама (без режима сплит-теста): - с наложением? или - с дедупликацией (=без наложения). Поясните пожалуйста этот момент. Заранее спасибо. === По режиму работы самого сплит-теста все понятно ✅. Спасибо.
1. Чтобы исключить пересечение, использовать сплит-тестирование 2. Чтобы понять инкрементальное влияние ФБ, использовать тестирование контрольной выборки
Спасибо за видео. Скажите, пожалуйста, а сплит-тест можно запускать на уровне группы? А в тестировании контрольной выборки выставляется бюджет на день и сколько надо по времени крутить такой тест. Это вместе с компанией запускается, если хочется узнать влияние определённой компании? Спасибо
Да, сплит тест можно запускать на уровне группы :) В тестировании контрольной выборки Вам нет необходимости что-либо дополнительно настраивать, бюджет от запуска этого теста не меняется. Вы верно подметили, что эффективнее всего запускать вместе с кампанией, но можно это сделать уже и после ее запуска. По времени, для наиболее точного результата можете выбрать 1 месяц.
Повсюду по разному говорят, кто-то кампанию копирует и немного изменяет, кто-то группу объявлений полностью разную, а кто-то вовсе не тестирует, а просто запускает много всего и далее уже отключается ненужное без тестов
Стоит ли пользоваться сплит-тестированием для запуска рекламы (тест продукта) или это лучше при масштабировании? Речь идет о дропшиппинге, но думаю разницы нет
У меня часто скачет цена. Период оптимизации прошел (трачу по 50 уе/сутки), лиды бывают как за 2 уе так и за 8 уе. Какой тест поможет решить эту проблему? В чем может быть причина?
Для того, чтобы проводить сплит тест, необходимо иметь гипотезу, ведь только она даст тесту цель. Для этого необходимо сначала изучить метрики Вашей кампании и выработать гипотезу, что может вызывать такую нестабильность. И потом провести сам тест. Например, гипотеза может быть, что используется неэффективная оптимизация доставки. Тогда можно провести тест, чтобы доказать или опровергнуть эту гипотезу.
Год назад делал А/Б тест, все работало нормально и понятно. Сейчас запустить А/Б уже проблема. На пример стоит цель выбрать в 5-ти видео самое эффективное (цель конверсия). Ясно как сравнять два типа объявлений, но что делать когда их 5?
Спасибо за классное видео! Как избежать следующего: при а/б тестах было большое количество показов на тестируемые аудитории. В результате выбрана победившая аудитория и на нее запускается новая рекламная кампания. Но получается, что часть людей (иногда большая) уже видела нашу рекламу на стадии а/б теста и не будет на нее реагировать - по ней частота показа по-сути будет выше единицы... Вопрос: как этого избежать, чтобы повторно не показывать победившую рекламу, тем кто ее уже видел на этапе а/б теста?
вопрос про контрольную группу: у Вас же в тестовой группе участвует большее кол-во пользователей? Почему тогда Вы соотносите 5 конверсий из контр гр (где выборка по кол-ву меньше) на тестовую группу? Те , если это в %-тогда можно понять. Но это же у Вас в абсолютных числах. Что-то тут я не допоняла... спасибо!
Объяснение сформировано в отчасти упрощенном варианте :) Тест сам по себе проводится по всем правилам статистики, ведь над их разработкой и поддержанием работает большая команда ученых и специалистов в Facebook, которая называется Marketing Science team.
Спасибо большое за видео. У меня вопрос: если я делаю сплит-тест на уровне кампании, 1. алгоритм видит, что это тест и я не конкурирую с собой в аукционе 2. Я благодаря этому могу собрать бОльший охват (чаще выигрывать) так как системе нужно показывать меня по таргетам, но нельзя одним и тем же 3. Может ли сплит-тестирование быть инструментом ещё и для масштабирования кампании на начальном этапе?
Сплит тестирование не связано с масштабированием, поскольку не увеличивает выборку. Вы так же работаете с текущей выборкой, настроенной Вами, просто она разделена на две части для объективности проведения теста.
@@VictorFilonenko Когда необходимо выявить какие креативы лучше конвертят на одной и той же аудитории ... зачем её разделять ? Тот что даёт лучшие результаты масштабируем. Или я что-то не так понял ?
А как тест контрольной выборки будет знать сколько пришло людей из контрольной группы, если аудитория из другого источника? p.s. Сильно не ругайте за вопрос, т.к. только начинаю изучать тему рекламы в Интернете и соц.сетях.
Вопрос по наложениям - есть группа 1 и группа 2, наложение, например, 30%. Как ФБ по пересекающейся аудитории поймет, к какой группе отнести результат теста?
Правильно ли я понимаю, что при проведении АБ теста может повыситься стоимость результата за счет повышения частоты и уменьшения размера аудитории? Иногда при АБ тестах наблюдаю скачок кумм. частоты, а после окончания линия частоты более ровная. Таким образом, мы можем ожидать снижения цены за результат после А/Б теста при прочих равных, правильно?
Не могу понять, нельзя что юы больше 40 процетов было сходство аудитории среди компаний или именно среди объявлений в конкретной группе?? Объясните пожалуйста, запуталась ((
Ваш коллега Павел Антонов неделю назад на обучении говорил, что а/б тесты он проводит крайне редко и есть смысл их делать только при больших бюджетах. Кого слушать?))
скажите пожалуйста как грамотно сделать сплит тест который на видео + лендинг(хотя бы 2 варианта)? сначало узнать какие креативы и аудитория конвертится ?
Извините, не совсем понял Ваш вопрос. Приходите в наше телеграм-сообщество Targetorium Community, там получите ответы от тысяч практикующих специалистов, в том числе, наших выпускников! ;)
Вопрос может быть странный и тем более не по теме, но может быть существует какой-то оптимальный ценовой коридор по цене за лид в сфере трейдинга и форекса на рынке Восточной Европы?
Невозможно говорить о точных бенчмарках, ведь стоимость результата зависит от многих факторов, начиная от креативов и оффера, заканчивая посадочной страницей.
Т.е, если я хочу протестировать по 2 разных креатива на две аудитории (2 крео на каждую), мне нужно создавать сплит тест? Делать две кампании, в каждой из которых по две группы объявлений с одной аудиторией и разными крео?
По сути, можно и в одной кампании, структура на качество проведения теста не повлияет. Главное, важно проводить этот тест именно в формате Сплит теста, а не просто параллельного запуска групп объявлений.
Ребята, делитесь в комментариях, какой вид тестирования вы чаще всего используете? Что именно тестируете?
Я тестировала сплит-тест только на креативах. На целой рк не пробовала еще. Спасибо за видео
Спасибо вам огромное Виктор! Я пришел на ваш канал после видео про пиксель. Вы смогли мне здоровски показать самый начальный этап, который я пропустил)
Очень полезное видео! Наконец пояснили простым языком что к чему) спасибо!
Круто , чітко і ясно. Дякую за контент ) така подача спонукає мене купити курс))
Хочу сегодня протестировать сайты)
А в чем преимущество сплит-тестирования перед, скажем, дублем? За а/в тест фб накидывает 30-40% к срм, при том что обычный дубль даст те же результаты по стандартному срм, а пересечение аудиторий на периоде теста вряд ли случится (при нормальном размере выборки).
Преимущество сплит тестирования в том, что это - единственная возможность провести тестирование объективно. Детально разобран этот вопрос как раз начиная с 1:19.
Охренеть! Я даже и не знал об этих инструментах. Спасибо за видео!
Огонь 🔥, спасибо!
@VictorFilonenko , добрый день.
Спасибо большое за ценный контент!
Но по сказанному возникает вопрос.
Буду благодарен за пояснение.
Из ваших слов:
1. При рекламе без сплит-теста у нас:
1.1. Возникает наложение.
1.2. FB включает механизм дедупликации и тем самым эффект наложения убирает.
*Минусом дедупликации является то что нет стабильного показа (доставки) каждого из креативов.
Хорошо. Понятно. ✅
Но ЗАТЕМ Вы рассказываете о том, что пересечение в аукционах достигает 63%.
И тут есть противоречие!
А именно: откуда возникает наложение(63%), если дудупликация его убирает?
(пересечение и наложение, я так понимаю, это одно и тоже).
Другими словами: так как все таки идёт реклама (без режима сплит-теста):
- с наложением?
или
- с дедупликацией (=без наложения).
Поясните пожалуйста этот момент.
Заранее спасибо.
===
По режиму работы самого сплит-теста все понятно ✅. Спасибо.
Спасибо вам большое. Тестирую всегда
Здравствуйте, ранее использовала только а б тесты на креативы и плейсменты
1. Чтобы исключить пересечение, использовать сплит-тестирование
2. Чтобы понять инкрементальное влияние ФБ, использовать тестирование контрольной выборки
Здравствуйте. Скажите пожалуйста. На какой оптимально период делать АВ тест? Товарный бизнес на США
Спасибо, интересно и полезно
Спасибо за видео. Скажите, пожалуйста, а сплит-тест можно запускать на уровне группы? А в тестировании контрольной выборки выставляется бюджет на день и сколько надо по времени крутить такой тест. Это вместе с компанией запускается, если хочется узнать влияние определённой компании? Спасибо
Да, сплит тест можно запускать на уровне группы :) В тестировании контрольной выборки Вам нет необходимости что-либо дополнительно настраивать, бюджет от запуска этого теста не меняется. Вы верно подметили, что эффективнее всего запускать вместе с кампанией, но можно это сделать уже и после ее запуска. По времени, для наиболее точного результата можете выбрать 1 месяц.
Повсюду по разному говорят, кто-то кампанию копирует и немного изменяет, кто-то группу объявлений полностью разную, а кто-то вовсе не тестирует, а просто запускает много всего и далее уже отключается ненужное без тестов
Нужно ли включать АБ тест , если я запустил оду группу объявлений.
Спасибо. Очень познавательно 👍
Я не использовал вобще сплит-тест. Теперь буду использовать
Пожалуйста, обязательно поделитесь результатами!
Здравствуйте. Остался долг после арендаторов. Карта привязана их. Аккаунт заблокирован. Грозит ли мне чем-то долг перед фейсбуком?
Стоит ли пользоваться сплит-тестированием для запуска рекламы (тест продукта) или это лучше при масштабировании? Речь идет о дропшиппинге, но думаю разницы нет
У меня часто скачет цена. Период оптимизации прошел (трачу по 50 уе/сутки), лиды бывают как за 2 уе так и за 8 уе. Какой тест поможет решить эту проблему? В чем может быть причина?
Для того, чтобы проводить сплит тест, необходимо иметь гипотезу, ведь только она даст тесту цель. Для этого необходимо сначала изучить метрики Вашей кампании и выработать гипотезу, что может вызывать такую нестабильность. И потом провести сам тест. Например, гипотеза может быть, что используется неэффективная оптимизация доставки. Тогда можно провести тест, чтобы доказать или опровергнуть эту гипотезу.
@@VictorFilonenko или разложить карты таро ))
Делал сплит-тесты. Но только креативы тестировал.
А я так понял, что при сплит тестировании можно и цель компании изменить и протестировать?
Можно тестировать креативы, аудиторию, оптимизацию доставки, плейсменты, и продакт сеты.
Почему бы картинки и тексты не протестировать на динамических креативах?
Год назад делал А/Б тест, все работало нормально и понятно. Сейчас запустить А/Б уже проблема. На пример стоит цель выбрать в 5-ти видео самое эффективное (цель конверсия). Ясно как сравнять два типа объявлений, но что делать когда их 5?
Спасибо за классное видео! Как избежать следующего: при а/б тестах было большое количество показов на тестируемые аудитории. В результате выбрана победившая аудитория и на нее запускается новая рекламная кампания. Но получается, что часть людей (иногда большая) уже видела нашу рекламу на стадии а/б теста и не будет на нее реагировать - по ней частота показа по-сути будет выше единицы... Вопрос: как этого избежать, чтобы повторно не показывать победившую рекламу, тем кто ее уже видел на этапе а/б теста?
Спасибо за видео
Можно ли Исключать интересы в работающей компании?
вопрос про контрольную группу: у Вас же в тестовой группе участвует большее кол-во пользователей? Почему тогда Вы соотносите 5 конверсий из контр гр (где выборка по кол-ву меньше) на тестовую группу? Те , если это в %-тогда можно понять. Но это же у Вас в абсолютных числах. Что-то тут я не допоняла... спасибо!
Объяснение сформировано в отчасти упрощенном варианте :) Тест сам по себе проводится по всем правилам статистики, ведь над их разработкой и поддержанием работает большая команда ученых и специалистов в Facebook, которая называется Marketing Science team.
Спасибо большое за видео. У меня вопрос: если я делаю сплит-тест на уровне кампании,
1. алгоритм видит, что это тест и я не конкурирую с собой в аукционе
2. Я благодаря этому могу собрать бОльший охват (чаще выигрывать) так как системе нужно показывать меня по таргетам, но нельзя одним и тем же
3. Может ли сплит-тестирование быть инструментом ещё и для масштабирования кампании на начальном этапе?
Сплит тестирование не связано с масштабированием, поскольку не увеличивает выборку. Вы так же работаете с текущей выборкой, настроенной Вами, просто она разделена на две части для объективности проведения теста.
@@VictorFilonenko Когда необходимо выявить какие креативы лучше конвертят на одной и той же аудитории ... зачем её разделять ? Тот что даёт лучшие результаты масштабируем. Или я что-то не так понял ?
Полезно
👌👌👌
А как тест контрольной выборки будет знать сколько пришло людей из контрольной группы, если аудитория из другого источника?
p.s. Сильно не ругайте за вопрос, т.к. только начинаю изучать тему рекламы в Интернете и соц.сетях.
Вопрос по наложениям - есть группа 1 и группа 2, наложение, например, 30%. Как ФБ по пересекающейся аудитории поймет, к какой группе отнести результат теста?
Для этого сплит тестирование и существует, чтобы избежать наложения и провести тест объективно :)
Правильно ли я понимаю, что при проведении АБ теста может повыситься стоимость результата за счет повышения частоты и уменьшения размера аудитории? Иногда при АБ тестах наблюдаю скачок кумм. частоты, а после окончания линия частоты более ровная. Таким образом, мы можем ожидать снижения цены за результат после А/Б теста при прочих равных, правильно?
Да, видео очень интересное. Фб становиться уже не темным лесом
В сплит закидываю интересы и плейсменты
Есть ли смысл тестировать аудитории если они точно не пересекаются? Допустим у них разный возраст или эти люди живут в разных городах.
Не могу понять, нельзя что юы больше 40 процетов было сходство аудитории среди компаний или именно среди объявлений в конкретной группе??
Объясните пожалуйста, запуталась ((
Ваш коллега Павел Антонов неделю назад на обучении говорил, что а/б тесты он проводит крайне редко и есть смысл их делать только при больших бюджетах. Кого слушать?))
Я специально уточнил у Павла - говоря о тестах, он говорил о брендинг кампаниях ;)
супер
Палка о двух концах. Можно попасть на плохую выборку. Почему нельзя запустить 3 рк. И уже смотреть результаты ?
Вопрос по бюджету на сплит тест, везде разные мнения по поводу минимально бюджета для адекватной работы тестирования. Какой минимальный бюджет?
Мужик говорит, что золотых стандартов не существует;-)
скажите пожалуйста как грамотно сделать сплит тест который на видео + лендинг(хотя бы 2 варианта)? сначало узнать какие креативы и аудитория конвертится ?
Извините, не совсем понял Ваш вопрос. Приходите в наше телеграм-сообщество Targetorium Community, там получите ответы от тысяч практикующих специалистов, в том числе, наших выпускников! ;)
@@VictorFilonenko не могу найти вообще телеграмм сообщество . Скиньте ссылочку пожалуйста
Бюджет кампании 100 - 150 $ в месяц. Имеет смысл проводить сплит-тест?
Наталья, и что-то получается с таким бюджетом? Поделитесь пожалуйста
Имеет смысл даже при ста рублях в день
По тестированию контрольной выборки немонятно. Мы же и без нее можем отследить сколько нпрода пришло из ФБ!?!?.
Одна группа объявлений одно объявление одна компания нужно ли включать АБ тест???
Вопрос может быть странный и тем более не по теме, но может быть существует какой-то оптимальный ценовой коридор по цене за лид в сфере трейдинга и форекса на рынке Восточной Европы?
Невозможно говорить о точных бенчмарках, ведь стоимость результата зависит от многих факторов, начиная от креативов и оффера, заканчивая посадочной страницей.
Т.е, если я хочу протестировать по 2 разных креатива на две аудитории (2 крео на каждую), мне нужно создавать сплит тест? Делать две кампании, в каждой из которых по две группы объявлений с одной аудиторией и разными крео?
По сути, можно и в одной кампании, структура на качество проведения теста не повлияет. Главное, важно проводить этот тест именно в формате Сплит теста, а не просто параллельного запуска групп объявлений.
а зачем тестить плейсменты,если есть разбивка, не можно оттестить только оптимизацию. Креативы либо динамическими тестятся, либо просто как объявления
а через месяц этот же сплит тест запускаем и получаем другой результат, так как предпочтения у аудитории сменились