Выполнение многомерных тестов

Важно! Эта возможность доступна только для кампаний, созданных с помощью Конструктора сообщений электронной почты.

После создания кампании с многомерными тестами можно запустить тест из Program с помощью операции Отправка кампании по электронной почте.

Совет. В конструкторе программ значок обозначает кампанию с многомерным тестированием.

Можно протестировать любое количество версий и выбрать размер выборки для тестирования. Следует отметить, что кампанию с многомерным тестированием можно запустить без тестирования. В этом случает отправляется версия кампании по умолчанию.

Выбор лучшего пути

Лучшая версия может быть выбрана автоматически или вручную. После выбора лучшей версии она будет использоваться для будущих запусков. Если лучшая версия по какой-либо причине удаляется, будет использоваться версия по умолчанию.

О выборе победителя автоматически и вручную

Если выбрано автоматическое определение победителя, Oracle Responsys автоматически выбирает лучшую версию на основе заданной метрики кампании:

  • Коэффициент открытий
    Число открытых сообщений.
  • Коэффициент щелчков рекламных ссылок
    Число сообщений, в которых получатель щелкает ссылку в сообщении.
  • Коэффициент преобразования.
    Число сообщений, после которых получатель сделал покупку.
  • Коэффициент отмен подписки.
    Число сообщений, после которых получатель отменил подписку.
  • Коэффициент уникальных открытий.
    Общее число уникальных открытий получателем относительно доставленных сообщений кампании по электронной почте.

    Важно. Эта функция доступна только в том случае, если она включена для учетной записи.

  • Коэффициент откликнувшихся
    Коэффициент уникальных откликнувшихся, исходя из того, что откликнувшиеся – это число получателей (то есть, уникальных лиц), щелкнувших на одной или нескольких ссылках.

    Важно. Эта функция доступна только в том случае, если она включена для учетной записи.

После выбора победителя программа отправляет уведомление на выбранный адрес электронной почты.

Выбор победителя вручную

Если выбрано определение победителя вручную, пользователь выбирает лучшую версию самостоятельно.

При выборе победителя вручную пользователь ждет выполнения теста, изучает результаты, после чего назначает лучшую версию. Когда тест завершен и пользователь должен выбрать победителя, программа отправит уведомление на указанный адрес электронной почты. Если в течение 7 дней победитель не выбран, будет использоваться версия по умолчанию.

Запуск теста MVT

Параметры многомерного теста определяются в диалоговом окне "Свойства".

Чтобы запустить многомерное тестирование:

  1. Добавьте в программу операцию Отправка кампании по электронной почте и дважды щелкните ее, чтобы открыть диалоговое окно "Свойства".
  2. В разделе Кампания.
    1. Нажмите кнопку Выбрать и выберите кампанию с многомерным тестированием, которую требуется использовать, затем нажмите ОК.

      Совет. Кампании с многомерным тестированием отмечаются в списке значком .

    2. Установите флажок Включить многомерное тестирование.

      Если этот флажок не установлен, кампания будет выполняться в обычном режиме с использованием версии по умолчанию.

  3. Щелкните раздел Многомерное тестирование, чтобы определить параметры теста.
  4. Чтобы прекратить все ранее запущенные тесты при начале этого теста, установите флажок Запуск нового теста.

    Если этот флажок не установлен, будет использоваться лучшая версия из предыдущего теста (если она уже выбрана). Если тест в данный момент выполняется, его выполнение продолжится.

  5. Выберите время запуска теста:
    • Начать публикацию. Тест запускается при публикации программы.
    • Дата/время начала. Тест запускается на указанную дату и время.
  6. Выберите режим выбора победителя: Автоматически или Вручную.

    Дополнительные сведения см. в разделе .

  7. Выберите метрику для определения победителя.
    • Коэффициент открытий. Отношение открытых сообщений к доставленным
    • Коэффициент щелчков рекламных ссылок. Отношение числа щелчков рекламных ссылок к доставленным сообщениям.
    • Коэффициент преобразования. Отношение преобразований к доставленным сообщениям.
    • Коэффициент отмен подписки. Отношение числа запросов на отмену подписки к доставленным сообщениям.
    • Коэффициент уникальных открытий Общее число уникальных открытий получателем относительно доставленных сообщений кампании по электронной почте.

      Важно. Эта функция доступна только в том случае, если она включена для учетной записи.

    • Коэффициент откликнувшихся Коэффициент уникальных откликнувшихся, исходя из того, что откликнувшиеся – это число получателей (то есть, уникальных лиц), щелкнувших на одной или нескольких ссылках.

      Важно. Эта функция доступна только в том случае, если она включена для учетной записи.

  8. В поле Общий процент выборки введите процент целевой аудитории для тестирования.

    Oracle Responsys распределяет выборку поровну между всеми тестируемыми версиями.

  9. Установите флажки для версий, которые требуется протестировать.

    Примечание. Если версия удаляется во время выполнения теста, вместо нее используется версия по умолчанию, и удаленная версия будет исключена из результатов теста.

    Совет. Для предварительного просмотра каждой версии щелкните .

  10. В разделе Продолжительность укажите, когда должно завершиться многомерное тестирование:
    • Время. При выборе этого параметра программа завершит многомерное тестирование по истечении указанного периода времени. Для продолжительности на часовой основе можно указать 1-23 часа. Следует иметь в виду, что тесты на часовой основе ограничены одним тестом в день на кампанию в пределах этапа программы. Это значит, что, хотя будут выполняться все тесты, результаты будут точными только для первого теста. Однако можно тестировать несколько кампаний в программе, а также одну и ту же кампанию в нескольких программах.
    • Значимость. При выборе этого параметра программа завершит многомерное тестирование после сбора достаточного объема функциональных показателей по проверяемым кампаниям. Статистическая значимость определяет, достаточно ли значимо различие в показателях разных версий, чтобы исключить случайность как причину этого различия. Статистическая значимость может стать причиной уменьшения числа получателей для тестирования, поскольку при многомерном тестировании статистическая значимость может быть определена задолго до истечения времени. В текстовом поле Дни введите значение истечения срока для многомерного тестирования, если не будет определен статистически значимый лучший вариант.

      Важно! Многомерное тестирование с принципом статистической значимости в настоящее время находится на этапе развертывания и будет вводиться постепенно. Для запроса доступа к этой функции выполните вход на страницу службы поддержки Oracle и создайте запрос на обслуживание.

  11. В поле Уведомление по электронной почте введите адреса электронной почты для получения уведомлений о тесте.

    Разделяйте адреса запятыми или точками с запятой.

  12. Нажмите Готово.

Анализ результатов теста и выбор победителя

Чтобы просмотреть результаты теста, дважды щелкните на вкладке Анализ. На странице Результаты теста показаны сведения о тесте и лучшая версия, если она была выбрана автоматически. Чтобы выбрать победителя вручную или изменить выбор, щелкните Назначить победителем для нужной версии.

См. также

Программа, ММТ, многомерное тестирование, многомерный, тест, победитель, автоматически выбранный вариант, вручную выбранный вариант, статистическая значимость