A/B Test Example

Variation Conversion View Conversion Rate SE Confidence Interval Change Confidence
Variation A (Control Group) 330 1093 30.19% 0.0138 % - -
Variation B (Test Group) 491 1123 43.72% 0.0148 % 44.82%  
  • SE: Standard Error
  • 95% confidence level을 사용
  • 두 그룹간의 차의 z-score는 6.6663