• 테스트 기간 자유 설정: 짧은 기간부터 긴 기간까지 테스트마다 필요한 기간이 다를 수 있습니다. 상황에 따라 자유롭게 기간을 설정할 수 있는 기능이 있다면 편리합니다.

• 테스트 그룹 개수 자유 설정: 테스트 그룹으로 B군만 두는 것이 아니라 설정을 조금씩 바꾼 B·C·D·E군을 테스트하고 싶을 수도 있습니다. 따라서 그룹 개수를 자유롭게 설정할 수 있는 기능이 있다면 좋습니다.

• 플랫폼 간 크로스 테스팅: 하나의 테스트로 서버 데이터, 웹, 앱을 동시에 테스트할 수 있으면 플랫폼 간 통합된 결과를 보거나 필요한 대로 세그먼트를 나누어서 보기 편리합니다.

• 지표 신규 온보딩: 도구가 기본적으로 제공하는 전환율, 매출 같은 지표 외에도 각 테스트마다 필요한 지표를 직접 설계해서 온보딩할 수 있는 도구가 분석하기에 좋습니다.

• 테스트 간 코호트(cohort) 기능: AB 테스트 여러 개를 동시에 진행하는 경우가 있습니다. 코호트란 특성이 동일한 사용자 그룹을 의미하는데, 이 경우 한 사용자가 AB 테스트 여러 개에 동시에 속하게 되어 테스트 간 영향을 줄 수도 있습니다. 특정 AB 테스트끼리는 서로 영향을 주지 않게 분리하는 기능이 있으면 좋습니다.