대부분의 개발자는 14일 비공개 테스트를 대기실처럼 생각합니다. 테스터 12명을 구하고, 2주를 기다리고, 신청합니다. 이렇게 하면 신청이 거절되고 14일을 다시 보내는 경우가 많습니다. Google의 프로덕션 액세스 검토는 테스트 중에 무슨 일이 있었는지 묻는데, 솔직한 답이 ‘아무 일도 없었다’이기 때문입니다.
더 나은 방법은 2주를 마감이 있는 짧은 베타 테스트로 보는 것입니다. 이 계획은 테스트를 몇 단계로 나누고, 단계마다 구체적인 할 일 몇 가지를 정해 둡니다. 테스터 12명, 14일 요건의 기본은 알고 있다고 가정합니다. 아직 비공개 트랙을 설정하지 않았다면 Play Console 비공개 테스트 설정 방법부터 시작하세요.
계획 한눈에 보기
| 시기 | 중점 | 주요 작업 |
|---|---|---|
| 1일 차 이전 | 준비 | 앱 설정 작업, 비공개 트랙, 국가, 테스터 확보, 버전 승인 |
| 1~3일 차 | 안정화 | 12명 이상 참여 확인, 설치 확인, 비정상 종료 모니터링 |
| 4~7일 차 | 의견 듣기 | 의견 수집, 가장 심각한 문제 수정, 첫 업데이트 배포 |
| 8~11일 차 | 개선 | 두 번째 수정, 다듬기, 인원 12명 이상 유지 |
| 12~14일 차 | 신청 준비 | 프로덕션 액세스 답변 초안 작성, 최종 점검 |
| 15일 차 이후 | 신청 | 대시보드에 14일이 표시되면 신청서 제출 |
1일 차 이전: 모든 것을 준비하기
카운트는 비공개 트랙을 만들 때가 아니라 테스터 12명 이상이 참여했을 때 시작됩니다. 그 전의 시간을 활용해 모든 장애물을 없애세요.
- Play Console의 앱 설정 작업을 완료합니다: 개인정보처리방침, 앱 액세스 권한, 광고, 콘텐츠 등급, 타겟층, 데이터 보안, 스토어 등록정보.
- 비공개 테스트 트랙을 만들고 테스터가 사는 모든 국가를 선택합니다.
- Google 그룹이나 이메일 목록으로 12명이 아니라 최소 15명의 테스터를 확보합니다. 부족하다면 테스터 12명 구하는 곳을 참고하세요.
- 버전을 업로드하고 검토에 보냅니다. 참여 링크는 Google이 비공개 테스트 버전을 승인한 뒤에야 작동하며, 승인에는 몇 시간에서 며칠이 걸릴 수 있습니다.
- 테스터가 한 번에 참여할 수 있도록 테스터용 안내를 준비합니다. 그대로 복사해 쓸 수 있는 버전도 마련해 두었습니다.
- 테스트 기록을 시작합니다: 날짜, 테스터 수, 버그, 변경 사항을 적을 간단한 문서입니다.
1~3일 차: 테스트가 실제로 진행되고 있는지 확인하기
첫 3일이 나머지 11일이 인정될지를 결정합니다. Play Console 대시보드의 프로덕션 액세스 체크리스트에서 참여 테스터가 12명 이상으로 표시되는지 확인하세요. 참여했다고 말한 사람 수보다 적게 표시된다면 지금 바로 원인을 찾으세요. 흔한 원인은 Play Console이 테스터를 집계하지 않는 이유에 정리되어 있습니다.
- 설치를 확인합니다. 참여와 설치는 다릅니다. 앱이 휴대폰에 설치되면 알려 달라고 테스터에게 부탁하세요.
- 비정상 종료를 지켜봅니다. Play Console에서 Android vitals와 출시 전 보고서를 여세요. 특정 기기 모델에서 실행하자마자 비정상 종료되는 일은 흔하고, 내 휴대폰으로만 테스트하면 놓치기 쉽습니다.
- 기록에 시작 시점을 적어 둡니다: 인원이 12명에 도달한 날짜와 현재 테스터 수.
4~7일 차: 의견을 듣고 첫 업데이트 배포하기
이쯤이면 테스터들이 앱을 몇 번 써 보고 나름의 의견이 생겼습니다. 가입 과정이 명확했는지, 어떤 화면이 헷갈렸는지처럼 구체적인 질문을 한 가지씩 해 보세요. 구체적인 질문에는 답이 오지만, ‘의견 있으세요?’에는 답이 없습니다.
- 의견을 분류합니다: 비정상 종료, 깨진 흐름, 제안.
- 비정상 종료와 깨진 흐름부터 고친 뒤 비공개 트랙에 새 버전을 게시합니다.
- 무엇을 왜 바꿨는지 출시 노트에 적습니다. 나중에 테스트 결과를 반영했다는 증거로 유용합니다.
- 7일 차 점검: 테스터 수가 여전히 12명 이상인가요? 줄었다면 13일 차가 아니라 오늘 대체 인원을 모집하세요.
8~11일 차: 개선하면서 분위기 이어 가기
둘째 주에는 보통 참여도가 떨어집니다. 무엇을 고쳤는지, 새로 해 볼 만한 것 한 가지를 짧게 테스터에게 알려 분위기를 이어 가세요. 그리고 의견을 바탕으로 두 번째, 더 작은 개선을 진행하세요. 문구, 특정 화면 크기에서의 작은 레이아웃 문제, 빠진 빈 화면 안내, 느린 화면 등입니다.
하루이틀마다 테스터 수를 계속 확인하세요. 요건은 최근 14일 연속이므로, 10일 차에 인원이 줄어도 2일 차에 줄어든 것만큼 중요합니다.
12~14일 차: 신청서 준비하기
14일 차까지 기다렸다가 쓰기 시작하지 마세요. 테스트 기록을 활용해 프로덕션 액세스 양식의 세 부분, 즉 비공개 테스트, 앱, 프로덕션 준비 상태에 대한 답변 초안을 작성하세요. 좋은 답변은 구체적입니다. 테스터를 어떻게 모집했는지, 몇 대의 기기와 어떤 Android 버전을 다뤘는지, 어떤 버그를 찾아 고쳤는지, 첫 빌드와 마지막 빌드 사이에 무엇이 바뀌었는지를 담으세요.
각 질문은 프로덕션 액세스 질문 답변 가이드에서 자세히 다룹니다. 이 버전을 모든 사용자에게 출시하게 되므로, 스토어 등록정보, 스크린샷, 데이터 보안 양식이 현재 앱과 일치하는지도 확인하세요.
15일 차 이후: 프로덕션 액세스 신청하기
대시보드에서 요건이 14일 동안 충족됐다고 확인될 때만 신청하세요. 일찍 신청하는 것은 불가능하고, 직접 날짜를 세면 하루 차이로 틀리기 쉽습니다. 결과가 나올 때까지 테스터의 참여 상태를 유지하세요. Google은 보통 약 7일 이내에 신청을 검토한다고 밝힙니다.
신청이 거절되면 Google은 다시 신청하기 전에 테스트를 계속하라고 안내합니다. 다음 라운드를 시작하기 전에 프로덕션 액세스가 거절되는 이유와 해결 방법을 읽어 보세요.
테스터 관리를 직접 하고 싶지 않다면
이 계획의 상당 부분은 모집, 확인, 독려, 교체 같은 테스터 관리입니다. TesterBie가 그 부분을 대신합니다. 각자 고유한 Google 계정을 가진 저희의 실제 Android 휴대폰이 24시간 이내에 비공개 테스트에 참여해 Google Play에서 앱을 설치하고, 14일 내내 매일 사용하며, 예비 휴대폰이 인원을 12명 위로 유지합니다. 버그는 스크린샷과 함께 이메일로 보내 드리므로 업데이트와 신청서에 쓸 자료가 생깁니다. 요금제는 앱당 테스터 13명 US$14.99, 15명 US$19.99 또는 20명 US$29.99입니다. 요금제 보기 또는 테스트 시작하기로 Google Play용 테스터 12명을 준비하세요.
자주 묻는 질문
14일 카운트는 정확히 언제 시작되나요?
비공개 테스트에 테스터 12명 이상이 참여한 시점부터 시작됩니다. 트랙을 만들거나 빌드를 업로드한다고 시작되지 않으며, 테스터가 참여하려면 먼저 Google이 버전을 승인해야 합니다.
테스트 중에 업데이트를 게시하면 14일이 초기화되나요?
아니요. 같은 비공개 트랙에 새 버전을 게시해도 테스터는 참여 상태를 유지합니다. 테스터 수가 12명 이상으로 유지되는 한, 테스트 중 업데이트는 Google에 좋은 신호입니다.
14일 차에 프로덕션 액세스를 신청할 수 있나요?
Play Console 대시보드에 요건이 14일 동안 충족됐다고 표시되면 신청하세요. 그때 신청 단계가 열립니다. 직접 날짜를 세면 틀리기 쉽습니다.
신청한 뒤에도 테스터가 참여 상태를 유지해야 하나요?
네. 검토에서 최근 활동을 보거나 테스트를 계속하라는 요청을 받을 수 있으니, Google이 결정을 내릴 때까지 비공개 테스트를 계속 진행하고 테스터의 참여 상태를 유지하세요.