성과 스위치 이해
프로그램에서 성과 스위치를 사용하여 프로그램 플로우의 컨텍스트 내에서 캠페인이나 기타 변수(예: 타이머)의 효과를 비교합니다. 예를 들어 다음을 테스트할 수 있습니다.
- 전자메일 캠페인의 경우
- 제목 라인 - 열기 비율이 더 높은 고객을 확인합니다.
- 메시지 콘텐츠 - 클릭률이 더 높은 메시지를 확인합니다.
- 랜딩 페이지 콘텐츠 - 전환율이 더 높은 페이지를 확인합니다.
- 타이밍 - 메시지 간에 간격을 다르게 할 때 전체 응답이 향상되는지를 확인합니다.
- 접촉 빈도, 메시지 관련성 또는 전체 전략 - 최저 구독 해제 비율을 나타내는 접근법을 확인합니다.
- SMS 캠페인의 경우
- 수신된 비율
- 짧은 URL
- 전환율
- 채널(전자메일 또는 SMS) - 최적의 응답을 유도하는 채널을 확인합니다.
최적의 결과를 생성하는 요소를 파악하면 해당 정보를 사용하여 프로그램의 성과를 향상할 수 있습니다.
다음은 성과 스위치를 사용하여 두 가지 전자메일 캠페인의 효과를 테스트하는 샘플 프로그램(성과 스위치를 사용하는 가장 일반적인 방법)입니다. 할당 스위치는 임의 그룹(10%)을 두 가지 테스트 경로로 각각 전송하고, 나머지 80% 홀드아웃 그룹을 경과 타이머로 전송합니다. 타이머가 경과된 후, 성과 스위치는 최적 결과를 생성한 경로로 홀드아웃 그룹을 전송합니다.
작업, 타이머 및 스위치의 많은 적합한 조합을 생성할 수 있지만 성과 스위치는 테스트 중인 변수 집합을 제한할 때 가장 분명한 결과를 제공합니다. 각 테스트 경로에 포함하는 변수(캠페인, 타이머 등)가 많을수록 결과의 원인을 하나의 변수로 생각할 가능성은 감소합니다.
수상자 선택 정보
성과 스위치를 구성하는 방법에 따라 시스템에서 네 가지 캠페인 지표 중 하나를 사용하여 최적 결과를 생성하는 캠페인이 포함된 경로를 자동으로 식별합니다. 또는 원하는 경로를 선택하기 전에 두 경로 모두의 결과를 평가하는 동안 스위치가 일시 중지되도록 설정할 수 있습니다.
성과 스위치를 자동 최적 캠페인 선택으로 설정한 경우, 다음 지표 중 하나를 선택하고 최적 캠페인 기준인 최소값 또는 최대값으로 설정합니다.
- 열기 비율: 열린 메시지 수
- 클릭률: 수신자가 메시지의 링크를 누르는 결과를 가져온 메시지 수
- 전환율: 수신자가 구매하는 결과를 가져온 메시지 수
- 구독 해제 비율: 수신자가 구독 해제하는 결과를 가져온 메시지 수
성과 스위치를 수동 최적 캠페인 선택으로 설정하는 경우 테스트가 실행될 때까지 기다린 후 일반적으로 Insight 대화형 대시보드를 사용하여 결과를 검사한 다음 성과 스위치로 돌아가서 최적 경로를 지정합니다. 이 접근법은 여러 캠페인, 타이머 및 기타 변수가 포함된 복잡한 경로에 가장 적합합니다. 다음 예제에서는 수동 최적 캠페인 선택에 가장 적합한 성과 스위치를 보여 줍니다.
팁: 자동 선택은 경로당 하나의 캠페인에 대한 결과를 측정하도록 설계되었으며 비교할 수 있는 경로에서 가장 효율적으로 작동합니다. 예를 들어 각 경로에 하나의 캠페인이 있으면 최적의 결과를 달성하는 캠페인을 손쉽게 결정할 수 있습니다. 그러나 각 경로에 캠페인과 타이머가 여러 개 있으면 평가 중인 캠페인 척도의 효과가 희석됩니다. 이 경우의 최적 방법은 성과 스위치를 수동 최적 캠페인 선택으로 설정하고, 각 경로의 집계 성과를 직접 분석하는 것입니다.
작동 방법
성과 스위치를 사용하여 각 경로에서 캠페인의 효과를 비교하기 전에 대상자를 테스트 및 홀드아웃 그룹으로 나누고 테스트 실행 기간을 결정해야 합니다. 스위치 앞에 연결되는 경로도 정의해야 합니다.
그룹을 무작위로 선택하는 할당 스위치를 사용하여 테스트 및 홀드아웃 그룹을 식별할 수 있습니다. 또는 데이터 스위치를 할당 스위치 앞에 배치하여 테스트 대상자를 두 개 그룹으로 나누기 전에 홀드아웃 그룹을 필터링할 수 있습니다.
다음에 타이머를 배치하여 테스트 길이를 설정하고 최적의 결과가 포함된 경로가 식별될 때까지 홀드아웃 그룹을 보류 패턴으로 유지합니다. 경과 타이머를 사용하여 테스트 기간을 설정하거나 목표 타이머를 사용하여 특정 시간 및 일자에 테스트를 종료할 수 있습니다.
성과 스위치의 다른 쪽에는 테스트 경로(일반적으로 두 개 경로)가 있습니다. 이론적으로 데이터 스위치를 사용하여 홀드아웃 그룹을 흡수하고, 할당 스위치를 사용하여 3개 테스트 경로를 생성할 수 있습니다. 그러나 실제로는 2개 경로가 더 현실적이고 의미 있는 테스트를 제공합니다.
각 경로에는 활동과 이벤트를 무제한 포함할 수 있지만 모범 사례에 따라 테스트하는 변수 수를 제어하여 단순하게 유지해야 합니다. 2개 캠페인을 평가하려면 두 경로에서 모두 같은 타이머를 사용합니다. 마찬가지로 메시지 사이에 가장 효과적인 간격을 식별하려면(수동 선택을 통해) 비슷한 메시지를 대상으로 타이머를 테스트하는 것이 좋습니다. 다른 변수를 사용하여 같은 메시지를 테스트하려면 2개 척도 집합을 얻을 수 있도록 캠페인 복사본을 생성합니다.
다른 요소가 모두 제자리에 있으면, 이제 성과 스위치를 추가 및 구성할 준비가 되었습니다.
프로그램에서 성과 스위치를 사용하려면 다음을 수행합니다.
- 초기 할당 또는 데이터 스위치, 타이머, 경로 요소 및 기타 필수 요소를 캔버스로 끌어 놓습니다. 필요에 따라 항목을 연결합니다.
- 성과 스위치를 캔버스로 끌어 놓고 해당 입력 타이머 및 2개 출력 경로에 연결합니다.
- 성과 스위치를 두 번 누르고 다음 옵션을 설정합니다.
- 전자메일 통지: 테스트가 완료되었을 때 통지할 전자메일 주소 목록을 입력합니다. 전자메일 주소가 여러 개이면 쉼표로 구분합니다.
자동 선택 모드를 사용하면 통지에는 수상자로 식별된 캠페인을 보고하는 내용이 표시됩니다. 수동 선택 모드를 사용하면 전자메일에는 수신자에게 테스트 경로의 성과를 검토하고 수상자를 식별할 시간임을 알리는 내용이 표시됩니다. 또한 수동 모드 성과 스위치에 대해 최적 캠페인이 식별되면 프로그램에서 통지합니다. - 수상자 선택 모드: 자동 또는 수동을 선택합니다.
선택하는 모드는 테스트 경로의 복잡성과 경로당 하나의 캠페인에 대한 단일 척도가 프로그램에서 최고 성과가 포함된 경로를 결정하기에 충분한 정보를 생성하는지 여부에 따라 다릅니다. 충분한 정보를 생성하면 자동을 선택하고, 그러지 않으면 수동을 선택합니다. 수동 선택 모드를 사용하면 Insight를 통해 각 경로에 대한 집계 결과를 검토하고 최적의 경로를 직접 결정할 수 있습니다.참고: 테스트 경로에 프로그램 SMS 캠페인이 포함된 경우에는 수동 선택 모드를 선택해야 합니다. 자동 선택에 사용되는 성과 데이터는 SMS 캠페인에 대해 사용할 수 없습니다.
- 지표 및 기준: 자동 선택 모드의 경우, 사용할 수 있는 지표(열기 비율, 클릭률, 전환율 또는 구독 해제 비율) 중 하나와 지표에 대한 기준(최대값 또는 최소값)을 선택합니다.
- 경로 이름 및 캠페인 선택: 각 테스트 경로에 대한 고유 레이블을 추가합니다. 자동 선택 모드를 사용 중이면 각 경로에서 캠페인 하나를 선택합니다.
- 전자메일 통지: 테스트가 완료되었을 때 통지할 전자메일 주소 목록을 입력합니다. 전자메일 주소가 여러 개이면 쉼표로 구분합니다.
- 이 프로그램이 게시될 때 스위치에 대한 데이터 수집을 처음부터 다시 시작해야 하는지를 선택합니다.
스위치를 통해 수집된 데이터는 최적의 결과가 포함된 경로를 식별하는 기준으로 사용됩니다. 를 참조하십시오. - 완료를 누릅니다.
참고: 성과 스위치를 프로그램에 맞추는 방법에 대한 자세한 내용은 프로그램 설계를 참조하십시오.
팁, 힌트 및 참고
- 테스트 그룹이 의미 있는 결과를 생성할 만큼 충분히 큰지 확인합니다. 테스트 그룹이 너무 작으면 성과의 차이가 통계상 유효하지 않을 수 있습니다.
- 선택 모드와 관계없이 테스트 결과를 검토하여 최적 방법을 측정 중인지 확인합니다. 예를 들어 다음 그림에서는 최고 성과를 올리는 캠페인이 포함된 경로가 어떻게 전체 수상자가 아닐 수 있는지를 보여 줍니다.
- 성과 스위치는 스케줄링된 필터, 고객 활성화됨, 고객 비활성화됨 또는 사용자정의 이벤트 입력 지점을 사용하여 생성된 대상자에 대해 작동합니다.
- 한 캠페인을 성과 스위치 두 개 이상에서 또는 같은 성과 스위치 내에서 두 번 이상 선택할 수는 없습니다.
- 성과 스위치가 자동 선택으로 설정되고 캠페인 두 개 이상이 같은 성과를 생성하는 경우, 성과 스위치 속성에 첫번째로 나열된 경로가 최적 캠페인으로 선언됩니다.
성과 스위치를 사용하여 게시된 프로그램 관리
게시 시 시작 설정은 새 성과 스위치를 추가할 때 자동으로 설정됩니다. 프로그램이 게시되면 이 설정은 자동으로 해제됩니다. 이를 통해 스위치는 게시 시간부터 설정을 활성화하고 프로그램을 다시 게시할 때까지 데이터를 수집할 수 있습니다. 스위치 정의를 편집하여 필요에 따라 이 설정을 변경할 수 있습니다.
수동 선택 모드에서 수상 경로를 선택하기 전에 이 설정을 활성화하고 프로그램을 다시 게시하면 스위치의 모든 대상자 멤버가 그대로 유지되고 수상 경로 선택을 기다립니다.
최적 경로가 식별되면(자동으로 또는 수동으로) 게시 시 시작 옵션의 동작이 변경됩니다.
- 스위치의 정의를 변경하고 게시 시 시작을 설정한 경우 프로그램을 다시 게시하면 스위치에 대한 기존 데이터가 모두 지워집니다. 그런 다음 스위치에서는 새 정의를 사용하여 수상 경로를 결정합니다.
- 스위치의 정의를 변경하고 게시 시 시작을 설정하지 않은 경우 프로그램을 다시 게시하면 해당 스위치에 대한 기존 수상 선택이 변경되지 않습니다.
선택 모드를 변경하면 프로그램에서 성과 스위치를 자동으로 다시 시작합니다. 이때 스위치의 대상자 멤버는 새 대상자 멤버가 스위치를 입력하고 수상 경로가 선택될 때까지 그대로 유지됩니다. 이때 모든 대상자 멤버가 수상 경로로 전송됩니다.
성과 스위치를 사용하여 프로그램 게시 취소
성과 스위치가 포함된 프로그램을 게시 취소하는 경우
- 스위치의 홀드아웃 그룹 멤버는 프로그램을 게시 취소한 후에 분석 탭에서 모두 종료하도록 선택하지 않는 한 유지됩니다. 모두 종료하도록 선택하면 스위치의 홀드아웃 멤버가 실행 테이블에서 제거됩니다.
- 수상자가 선택되면 스위치에서는 해당 선택을 유지합니다.
- 스위치가 자동 선택으로 설정되고 수상자가 선택되지 않은 경우 프로그램을 게시 취소하면 프로그램이 다시 게시되고 새 대상자 멤버가 스위치를 입력할 때까지 선택 프로세스가 중지됩니다.
성과 스위치가 포함된 게시된 프로그램을 편집하는 경우
- 성과 스위치를 변경하지 않으면 계속 게시됨으로 작동합니다.
- 성과 스위치를 삭제하고 프로그램을 다시 게시하면 스위치의 홀드아웃 그룹 멤버가 실행 테이블에서 제거됩니다.
- 성과 스위치에 종료 경로를 추가하거나 기존 최적 캠페인을 제외한 종료 경로를 모두 삭제하면, 프로그램을 다시 게시할 때 스위치에서 최적 경로를 유지합니다.
- 최적 경로를 삭제하고 프로그램을 다시 게시하면, 성과 스위치가 새 대상자 멤버를 기다리도록 재설정됩니다.
수동으로 수상 경로 선택
성과 스위치는 앞서가는 타이머가 만료될 때까지 실행됩니다(데이터 수집). 스위치가 자동 선택으로 설정된 경우, 최고 성과를 올리는 캠페인이 포함된 경로가 최적 캠페인으로 지정됩니다. 스위치가 수동 선택으로 설정된 경우, 프로그램에서 프로그램 페이지에 경고를 표시하고 스위치에 대해 정의된 주소로 전자메일을 전송합니다. 이때 Insight에서 테스트 결과를 검토하고 최적의 결과를 생성한 경로를 식별해야 합니다.
최적 경로를 식별한 후에는 성과 스위치에서 최적 경로를 지정해야 합니다.
수상 경로를 선택하려면
- 성과 스위치가 포함된 프로그램을 열고 분석 탭에서 스냅샷을 선택합니다.
- 성과 스위치를 두 번 누르고 최적 경로를 선택한 다음, 완료를 누릅니다.
선택한 경로가 강조 표시되고, 프로그램에서 지정된 전자메일 주소에 후속 통지를 전송합니다. 나머지 대상자 멤버(및 성과 스위치에 도착하는 모든 후속 트래픽)는 선택한 경로로 전송됩니다.
선택된 경로를 재정의하려면
- 성과 스위치가 포함된 프로그램을 열고 분석 탭에서 스냅샷을 선택합니다.
- 성과 스위치를 두 번 누르고 새 최적 경로를 선택한 다음, 완료를 누릅니다.
- 경로를 변경할지를 확인합니다.
프로그램에서 변경사항을 알리는 전자메일 통지를 성과 스위치의 배포 목록으로 전송합니다. 자동 선택이 발생하기 전에 수상자를 수동으로 선택하면 타이머가 만료될 때 자동 선택이 수동 선택을 재정의하지 않습니다.