14 дней закрытого тестирования по дням: план для 12 тестировщиков

Четырнадцать дней пролетают быстро, если знать, зачем нужен каждый из них. Этот план ведёт вас от подготовки до заявки на доступ к рабочей версии, чтобы две недели закончились одобрением, а не новым кругом.

Большинство разработчиков воспринимают 14-дневное закрытое тестирование как зал ожидания: собрать 12 тестировщиков, подождать две недели, подать заявку. Такой подход часто заканчивается отказом и ещё 14 днями, потому что при проверке заявки на доступ к рабочей версии Google спрашивает, что происходило во время теста, а честный ответ — «ничего».

Лучше относиться к этим двум неделям как к короткой бете с дедлайном. План делит тест на этапы, и на каждом есть несколько конкретных задач. Предполагается, что вы знаете основы требования о 12 тестировщиках и 14 днях; если трек закрытого тестирования ещё не настроен, начните с настройки закрытого тестирования в Play Console.

План в двух словах

КогдаФокусГлавные задачи
До 1-го дняПодготовкаЗадачи по настройке приложения, закрытый трек, страны, тестировщики наготове, выпуск одобрен
Дни 1–3СтабилизацияУбедиться, что подписались 12 и больше, проверить установки, следить за сбоями
Дни 4–7Обратная связьСобрать отзывы, исправить худшие проблемы, выпустить первое обновление
Дни 8–11УлучшенияВторой круг исправлений, доработка деталей, держать число выше 12
Дни 12–14Подготовка заявкиНабросать ответы для заявки на доступ к рабочей версии, финальные проверки
С 15-го дняЗаявкаПодать заявку, как только панель управления покажет 14 дней

До 1-го дня: подготовьте всё заранее

Отсчёт не начинается в момент создания закрытого трека. Он стартует, когда к тесту присоединятся минимум 12 тестировщиков. Используйте время до этого, чтобы убрать все препятствия:

  • Выполните задачи по настройке приложения в Play Console: политика конфиденциальности, доступ к приложению, реклама, возрастные ограничения, целевая аудитория, безопасность данных и страница приложения в магазине.
  • Создайте трек закрытого тестирования и выберите все страны, где живут ваши тестировщики.
  • Соберите минимум 15 тестировщиков, а не 12 — через Google Группу или список адресов электронной почты. Если людей не хватает, посмотрите, где найти 12 тестировщиков.
  • Загрузите выпуск и отправьте его на проверку. Ссылка для участия заработает у тестировщиков только после того, как Google одобрит выпуск для закрытого тестирования, а это может занять от нескольких часов до нескольких дней.
  • Подготовьте инструкцию для тестировщиков, чтобы они присоединились с первого раза. У нас есть готовый текст, который можно скопировать.
  • Заведите журнал теста: простой документ, куда вы будете записывать даты, число тестировщиков, ошибки и изменения.

Дни 1–3: убедитесь, что тест действительно идёт

Первые три дня решают, засчитаются ли остальные одиннадцать. Откройте на панели управления Play Console чек-лист для доступа к рабочей версии и убедитесь, что там указано не меньше 12 подписавшихся тестировщиков. Если их меньше, чем людей, которые сказали, что присоединились, выясните причину сразу; типичные причины разобраны в статье почему Play Console не засчитывает тестировщиков.

  • Проверьте установки. Подписаться на тест — не то же самое, что установить приложение. Попросите тестировщиков написать вам, когда приложение появится у них на телефоне.
  • Следите за сбоями. Откройте в Play Console Android vitals и отчёт о предварительной проверке: сбой при запуске на одной модели телефона — частая история, и на своём телефоне её легко не заметить.
  • Запишите отправную точку в журнал: дату, когда число дошло до 12, и сколько у вас тестировщиков.

Дни 4–7: слушайте и выпустите первое обновление

К этому моменту тестировщики уже несколько раз открывали приложение, и у них есть мнение. Задайте каждому один конкретный вопрос: например, понятна ли была регистрация или какой экран их запутал. На конкретные вопросы отвечают; на «есть отзывы?» — молчат.

  • Разложите отзывы по группам: сбои, сломанные сценарии и пожелания.
  • Сначала исправьте сбои и сломанные сценарии, затем опубликуйте новый выпуск в закрытый трек.
  • Пишите примечания к выпуску, где сказано, что и зачем изменилось. Позже они пригодятся как доказательство того, что вы работали по итогам теста.
  • Контрольная точка 7-го дня: тестировщиков всё ещё больше 12? Если число упало, ищите замену сегодня, а не на 13-й день.

Дни 8–11: улучшайте и не теряйте темп

На второй неделе вовлечённость обычно падает. Поддержите её коротким сообщением тестировщикам: что вы исправили и что новое стоит попробовать. Затем используйте отзывы для второго, меньшего круга улучшений: формулировки, мелкие проблемы вёрстки на некоторых размерах экрана, отсутствующие пустые состояния, медленные экраны.

Продолжайте проверять число тестировщиков раз в день-два. Требование касается последних 14 дней без перерыва, поэтому провал на 10-й день так же важен, как и на 2-й.

Дни 12–14: подготовьте заявку

Не ждите 14-го дня, чтобы начать писать. По журналу теста набросайте ответы на три части формы заявки на доступ к рабочей версии: о закрытом тесте, о приложении и о готовности к выпуску. Хорошие ответы конкретны: как вы искали тестировщиков, сколько устройств и версий Android было охвачено, какие ошибки нашли и исправили и что изменилось между первой и последней сборкой.

В нашем руководстве как отвечать на вопросы заявки на доступ к рабочей версии каждый вопрос разобран подробно. Также проверьте, что страница в магазине, скриншоты и форма безопасности данных соответствуют приложению в его нынешнем виде — ведь именно эту версию получат все.

С 15-го дня: подайте заявку на доступ к рабочей версии

Подавайте заявку только тогда, когда панель управления подтвердит, что требование выполняется 14 дней: раньше подать не получится, а считая дни самостоятельно, легко ошибиться на один. Не выводите тестировщиков из теста, пока не получите решение. По словам Google, заявки обычно рассматриваются примерно за 7 дней.

Если в доступе откажут, Google попросит продолжить тестирование перед повторной заявкой. Прежде чем начинать новый круг, прочитайте, почему отказывают в доступе к рабочей версии и как это исправить.

Если не хотите возиться с тестировщиками сами

Большая часть этого плана — работа с тестировщиками: найти, проверить, напомнить, заменить. TesterBie берёт эту часть на себя. Наши реальные Android-телефоны, у каждого из которых свой аккаунт Google, присоединяются к вашему закрытому тесту в течение 24 часов, устанавливают приложение из Google Play и пользуются им каждый день все 14 дней, а запасные телефоны держат число выше 12. Ошибки приходят вам на email со скриншотами — это материал и для обновлений, и для заявки. Тарифы: 13 тестировщиков за 14,99 $, 15 тестировщиков за 19,99 $ или 20 тестировщиков за 29,99 $ за приложение. Посмотрите тарифы или запустите тест и получите 12 тестировщиков для Google Play.

Частые вопросы

Когда именно начинается отсчёт 14 дней?

Когда к закрытому тесту присоединятся минимум 12 тестировщиков. Создание трека или загрузка сборки отсчёт не запускают, а тестировщики смогут присоединиться только после того, как Google одобрит выпуск.

Сбрасывает ли обновление во время теста отсчёт 14 дней?

Нет. Тестировщики остаются в тесте, когда вы публикуете новый выпуск в тот же закрытый трек. Обновления во время теста — хороший знак для Google, если число тестировщиков остаётся 12 или больше.

Можно ли подать заявку на доступ к рабочей версии на 14-й день?

Подавайте заявку, когда панель управления Play Console покажет, что требование выполняется 14 дней. Именно тогда становится доступна кнопка подачи; считая дни самостоятельно, легко ошибиться.

Должны ли тестировщики оставаться в тесте после подачи заявки?

Да. Не останавливайте закрытый тест и не выводите из него тестировщиков, пока Google не примет решение: проверка может учитывать недавнюю активность, или вас могут попросить продолжить тестирование.