Moderado: você está presente (pessoalmente ou em uma chamada), dá as tarefas, observa e pergunta. Não moderado: o testador trabalha sozinho, no tempo dele, e relata depois por escrito ou com gravação.
Comparação
| Moderado | Não moderado | |
|---|---|---|
| Seu tempo | Alto: você participa de cada sessão | Baixo: você lê os resultados |
| Profundidade | Você pode perguntar "por quê?" na hora | Só o que o testador escreveu |
| Agendamento | Precisa de horários em comum | O testador escolhe o horário |
| Cenário | Muitas vezes uma chamada tipo laboratório | Aparelho real, ambiente real |
| Risco | Você pode influenciar a pessoa | Respostas pouco claras não podem ser aprofundadas |
| Melhor para | Fluxos confusos, protótipos iniciais | Caça ampla a bugs, variedade de aparelhos, checagens rápidas |
Quando escolher cada um
- Ideia inicial ou fluxo pouco claro: moderado. Você precisa do "porquê" e pode ajustar a tarefa na hora.
- Uma build que funciona em grande parte e precisa de cobertura de bugs e aparelhos: não moderado, com uma estrutura clara para que as respostas sejam comparáveis.
- Pouco tempo, muitos aparelhos: não moderado.
- Um problema que você não consegue explicar pelo relatório escrito: faça uma chamada moderada curta para aprofundar.
Você pode combinar os dois: primeiro não moderado para achar o que quebra, depois duas ou três sessões moderadas nos pontos mais críticos.
Teste entre pares como opção não moderada
No AppReviewX, outros desenvolvedores testam seu app por conta própria e enviam feedback privado e estruturado. Isso é não moderado: você não fica ao lado deles, então notas de teste claras fazem diferença. Use uma estrutura fixa para os relatórios (veja modelo de relatório de bug e perguntas de integração para testadores). Um feedback que você escreve vale um crédito; contas novas começam com 0.
Para o Google Play há grupos de teste (12 testadores, 14 dias seguidos, para apps Android) e pacotes de teste para apps que já estão publicados.
Limites
Testadores não moderados não são seu público-alvo por padrão; são outros desenvolvedores. Reserve entrevistas ou pequenos testes com usuários para perguntas sobre o seu público. Veja entrevistas com usuários para apps mobile.
Relacionados: design do formulário de feedback no app, canais de feedback para apps, hub.