App Store 스크린샷 A/B 테스트: 데이터가 실제로 보여주는 것
Apple은 현재 페이지에 대해 3가지 스크린샷 변형을 테스트할 수 있게 하고, Google은 2가지를 테스트할 수 있게 하며, 대부분의 방문자는 어차피 첫 번째 것 이상으로 스크롤하지 않습니다. 각 플랫폼이 실제로 허용하는 것과 실제 게시된 테스트가 무엇을 움직였는지 여기 있습니다.
각 플랫폼이 실제로 테스트할 수 있게 하는 것
App Store Connect에서 실행되는 Apple의 제품 페이지 최적화는 현재 앱 아이콘, 스크린샷 또는 미리보기 비디오에 대해 최대 세 가지 대체 처리를 테스트하며, iOS 또는 iPadOS 15 이상 사용자에게만 표시됩니다. 앱당 한 번에 하나의 테스트만 실행할 수 있으며 최대 90일 동안 실행할 수 있고, Apple은 승자를 적용하기 전에 높은 신뢰도를 기다릴 것을 권장합니다. 자체 공개 사례 연구에서는 원시 백분율만이 아니라 98% 및 100% 신뢰도에서 결과를 인용합니다.
Google Play의 스토어 등록정보 실험은 다르게 작동합니다. 현재 등록정보에 대해 최대 두 개의 변형을 얻을 수 있으며, 아이콘, 특성 그래픽, 스크린샷 전반에 걸쳐 하나의 기본 실험을 실행하거나 설명 텍스트도 테스트할 수 있는 최대 다섯 개의 현지화된 실험을 동시에 실행할 수 있습니다. Google은 선택한 잠재고객 비율을 버전 간에 균등하게 분할하고, 아직 종료하지 않았다면 6개월 후에 테스트를 자동 중지합니다.
관심이 실제로 가는 곳
첫 번째 스크린샷이 페이지의 다른 어떤 요소보다 중요한 이유는 Sensor Tower가 작성한 SplitMetrics 테스트에서 나옵니다. 측정한 실험 전반에서 평균 스크린샷 스크롤률은 17%에 불과했고, 방문자의 약 1%가 전체 앱 설명을 읽었습니다. 제품 페이지에 도달한 대다수의 사람들은 첫 번째 항목만 보게 됩니다.
실제 테스트가 움직인 것
Apple은 자체 개발자 결과 몇 가지를 공개합니다. A/B 테스트 공급업체인 SplitMetrics는 테스트된 구체적인 변형을 포함한 더 자세한 사례 연구를 발표합니다. 함께 놓고 보면 상승폭은 실재하지만 미미하여 한 자릿수에서 10대 후반까지이며, 일부 마케팅 문구가 암시하는 배수는 아닙니다.
Prisma 시퀀스는 하나가 아닌 세 가지 테스트를 연속으로 실행했기 때문에 더 유익합니다. 첫 번째는 단순 재작성(텍스트를 위로 이동, 대비 증가, 사회적 증거 추가)으로 전환율이 12.3% 상승했습니다. 두 번째는 네 가지 새로운 이미지와 필터 변형으로 기존 페이지에 비해 유의미한 변화가 없었습니다. 세 번째는 검증된 상단 이미지를 다시 배치하고 두 번째 스크린샷에 새로운 비디오 필터링 기능에 대한 콜아웃을 추가하여 19.7% 결과를 얻었습니다. 중간의 실패한 테스트는 낭비가 아니었습니다. 이미지 자체가 지렛대가 아니라 메시지가 지렛대임을 알려준 것입니다.
다른 어떤 테스트보다 먼저 실행할 가치가 있는 테스트
대부분의 방문자가 실제로 보는 페이지의 양이 얼마나 적은지를 고려할 때, 두 플랫폼 모두에서 가장 영향력이 큰 단일 변경은 일반적으로 네 번째나 다섯 번째가 아닌 첫 번째 스크린샷입니다. 테스트 비용도 가장 저렴합니다. 다섯 개의 새 이미지를 촬영하는 것이 아니라 하나를 재정렬하거나 다시 작성하는 것입니다.