A/B 테스트

서로 다른 썸네일, 동영상 전체, 행동 유도 문구를 비교 테스트하세요. Pellio는 동영상이 임베드된 모든 곳에서 시청자를 원본과 최대 세 개의 변형에 고르게 나누고, 어느 쪽이 더 나은지 보여 줍니다. 임베드 코드는 바뀌지 않습니다. A/B 테스트는 Advanced 요금제에서 사용할 수 있습니다.

테스트할 수 있는 항목

• Thumbnail(썸네일): 대체 이미지를 업로드합니다. 플레이어가 로드된 횟수 중 시청자가 재생을 누른 비율인 play rate(재생률)로 측정합니다.
• Video(동영상): 같은 임베드에서 다른 동영상(다른 편집본, 짧은 버전, 새 인트로)을 재생합니다. 로드 중 시청자가 절반 이상 시청한 비율인 engagement(참여도)로 측정합니다.
• Call to action(행동 유도): 이메일 양식, 행동 유도, 카드, 종료 화면 중 하나의 제목, 텍스트, 버튼, 링크를 바꿉니다. 로드 중 클릭이나 양식 제출이 있었던 비율인 conversions(전환)로 측정합니다.

어떤 테스트든 목표를 바꿀 수 있습니다. 예를 들어 동영상 테스트를 전환으로 평가할 수 있습니다.

테스트 시작하기

1. 동영상을 열고 A/B test 탭으로 이동합니다.
2. 테스트할 항목과 목표를 선택합니다.
3. 각 변형을 설정합니다. 썸네일을 업로드하거나, 동영상을 선택하거나, 새 문구를 작성하세요. 행동 유도 변형에서 비워 둔 필드는 원본 문구를 그대로 사용합니다.
4. Pick the winner automatically를 켜 두거나, 직접 결정하려면 끕니다.
5. Start test를 클릭합니다. 모든 임베드, 공유 페이지, WordPress에 즉시 적용됩니다.

동영상 하나에는 한 번에 하나의 테스트만 실행할 수 있습니다.

결과 읽기

각 변형마다 loads(플레이어가 페이지에 표시된 횟수), 재생률, 절반 이상 시청한 비율, 전환, 원본 대비 변화, 그리고 chance to be best(최고일 확률)가 표시됩니다. 최고일 확률은 지금까지의 데이터로 볼 때 이 변형이 테스트 목표에서 실제로 가장 좋을 가능성입니다. 수치가 작으면 불확실하므로, 각 변형의 로드 수가 충분히 쌓이기 전까지는 확률이 고르게 나뉜 상태에 가깝게 유지됩니다.

플레이어가 기억하도록 허용하는 브라우저에서는 30일 동안 같은 변형이 계속 표시됩니다. Pellio 안에서 동영상을 시청한 것은 결과에 포함되지 않습니다.

승자 고르기

Pick the winner automatically가 켜져 있으면 Pellio가 매시간 확인합니다. 모든 변형의 로드 수가 100회 이상이 되고 그중 하나가 최고일 확률이 95%에 도달하면, 테스트가 종료되고 승자가 적용됩니다. 언제든지 변형 옆의 Use나 원본 옆의 Keep을 클릭해 직접 정할 수도 있습니다.

• 이긴 썸네일은 동영상의 썸네일이 됩니다.
• 이긴 행동 유도 문구가 원본 문구를 대체합니다.
• 이긴 동영상은 원본이 임베드된 모든 곳에서 계속 재생됩니다. 원본으로 돌아가려면 테스트를 삭제하세요.

종료된 테스트는 삭제하기 전까지 결과와 함께 탭에 남아 있습니다.

알아 두면 좋은 점

• 썸네일 테스트가 실행되는 동안 WordPress 플러그인(0.6.23 이상)은 썸네일을 먼저 보여 주지 않고 플레이어를 바로 로드하므로, 각 시청자가 자신에게 배정된 변형의 썸네일을 보게 됩니다. 테스트를 시작한 후 전환되기까지 최대 1시간이 걸릴 수 있습니다.
• 팝오버 임베드는 열리기 전에 동영상 자체의 썸네일을 보여 주므로, 썸네일 테스트에서는 플레이어가 열렸을 때만 집계합니다.
• 연결된 YouTube, Vimeo 동영상은 테스트할 수 없습니다.
• API에서는 GET /v1/videos/{id}/ab-tests가 결과를 반환하며, MCP 서버로 연결된 AI 어시스턴트도 결과를 읽을 수 있습니다.