퍼널

A/B 테스트가 정상적으로 구현되고 트래픽이 할당되어 사용자가 A/B 테스트에 노출되면, 최대 1시간 이내에 테스트 결과를 확인할 수 있습니다. 이후에는 약 1시간 이내의 시간을 주기로 업데이트 되며, A/B 테스트 시작일부터 최대 30일까지의 데이터를 확인하실 수 있습니다.

퍼널 결과 분석하기

1. 단계 : 단계의 이름과 설정한 이벤트, 필터에 대한 정보를 볼 수 있습니다. 마우스를 갖다 대면 더 상세한 정보를 볼 수 있습니다.
2. 데이터 표 : 단계별, 그룹별 전환율, 사용자 수, 그룹 A 대비 개선율을 확인할 수 있는 표입니다.
   2-1. 전환율 : 해당 테스트 그룹의 단계 0의 사용자 중 각 단계의 이벤트를 발생시킨 사용자의 비율을 의미합니다.
   2-2. 사용자 수 : 각 단계의 이벤트를 발생시킨 
사용자의 수(Unique User)를 의미합니다.
   2-3. 그룹 A 대비 개선율 : 그룹 A의 사용자 전환율과 해당 테스트 그룹의 사용자 전환율의 상대적인 차이를 의미합니다. 특히 p-value가 0.05 미만일 때 통계적으로 유의미한 것으로 판단되어, 초록색으로 표시됩니다.
3. 그래프 : 단계별 전환율을 확인할 수 있는 선 그래프입니다. 테스트 그룹이 각각의 선으로 표시됩니다. 마우스를 갖다 대면 해당 단계의 상세 정보를 확인할 수 있습니다.
   3-1. 단계 0 기준 전환율 : 해당 테스트 그룹의 단계 0의 사용자 중 각 단계의 이벤트를 발생시킨 사용자의 비율을 의미합니다.
   3-2. 이전 단계 기준 전환율 : 해당 테스트 그룹의 직전 단계 사용자 중 각 단계의 이벤트를 발생시킨 사용자의 비율을 의미합니다.
   3-3. 그룹 A 대비 개선율 : 그룹 A의 사용자 전환율과 해당 테스트 그룹의 사용자 전환율의 상대적인 차이를 의미합니다.
   3-4. p-value : A/B 테스트 결과의 신뢰도를 표현하는 값입니다. p-value는 낮을 수록 더 신뢰도가 높은 결과임을 의미합니다. 특히 0.05 미만일 때 경우 통계적으로 유의미한 것으로 판단되어, Significant 뱃지가 표시됩니다.