Um caso para o teste beta

Como a pesquisa do usuário e o teste beta se interceptam

Nikki Anderson Blocked Desbloquear Seguir Seguindo 11 de janeiro DILBERT © 1994 Scott Adams

O que é o teste beta?

O teste beta é uma ferramenta maravilhosa e muitas vezes subutilizada, que permite que você verifique o feedback do usuário para um produto ativo. Como o teste beta exige apenas que você coloque o produto em um pequeno número percentual de usuários, corrija os erros ou melhore o UX antes de distribuir o produto para todos . Essencialmente, você usa esses beta testers para ver se eles estão realmente usando o produto / recurso, como eles estão usando e quais bugs, melhorias ou inovações surgem. Se os testadores beta não estiverem usando determinados recursos, as chances são de que sua base de usuários regular também não seja. É durante este estágio que você pode descobrir o porquê do teste beta.

Eu não acredito necessariamente que o teste beta e o teste do usuário sejam coisas diferentes. Na verdade, acho que eles estão sob o mesmo guarda-chuva e é mais um processo contínuo no qual o teste em um determinado ponto da versão do software é visto como um teste beta. No entanto, muitas pessoas fazem testes beta sem pesquisa de usuário e vice-versa, como na análise de desempenho de software, pipeline de desenvolvimento de produto e análise de marketing. O teste de usabilidade mostra se um conceito é utilizável, enquanto o teste beta mostra se / como as pessoas realmente usarão o produto ativo.

A maior diferença é que o teste beta ocorre quando o produto está realmente vivo , em vez de conceito ou protótipo.

Por que você deve testar beta?

Posso dizer honestamente que o teste beta tem muitos benefícios diferentes e é um ótimo conceito para trazer para sua empresa. Como ele pode ser usado na pesquisa de usuários, mas também em marketing e vendas, isso pode levar a uma colaboração entre departamentos e uma experiência geral melhor para seus clientes. Aqui estão alguns benefícios que tenho visto da minha experiência anterior com testes beta:

  1. A capacidade de fazer pesquisas contínuas
  2. Ciclo de sempre testar novos recursos
  3. Encontrar bugs ou melhorias no UX antes que eles se tornem um problema em larga escala
  4. Mostre aos usuários que você se importa profundamente com a opinião deles
  5. Crie uma comunidade de usuários engajados que lhe dará feedback sobre suas novas ideias, recursos e lançamentos, o que, por sua vez, os ajuda a se sentir valorizados

Apenas escrever esta lista me deixa animado para iniciar um programa beta no meu próximo trabalho em tempo integral. Muitas empresas estabelecidas e até mesmo startups estão absolutamente em um lugar onde podem iniciar um programa beta, o que significa que podem começar a fazer pesquisas contínuas com usuários, o que é a chave para uma empresa saudável. Usuários felizes = companhia feliz.

Quando você deve fazer o teste beta?

O teste beta é um conceito maravilhoso para alguns cenários diferentes:

  1. Se você quer começar a pesquisa de usuários e já tem um produto ao vivo
  2. Se você quiser testar e aprender sobre diferentes recursos antes da conclusão completa
  3. Se você tiver perguntas muito específicas, você quer responder sobre um determinado recurso ou fluxo para tomar decisões informadas.
  4. Se você estiver interessado em acompanhar a análise em termos de uso antes de lançá-la em toda a sua base de usuários
  5. Se você está tentando encontrar erros ou problemas com o fluxo em novas versões, recursos ou produtos

A parte mais importante a notar é que o teste beta é feito quando um produto está ativo, e isso inclui produtos que estão apenas no estágio MVP (produto viável mínimo) – na verdade, ele é incentivado a testar produtos beta no estágio MVP.

Iniciar um programa de pesquisa do usuário de teste beta

Não há uma maneira de começar um programa beta (ou qualquer coisa, na verdade), então estou simplesmente falando de minhas experiências do meu passado. Pode levar algum tempo para começar, especialmente se você estiver começando 100% do zero, mas os benefícios superam todo o trabalho inicial. Depois de estabelecer seu programa beta, tudo o que você precisa fazer é simplesmente mantê-lo e aproveitar todo o feedback do usuário.

  1. Definir as metas e regras do programa beta
    O que você quer deste programa beta? Você estará envolvido com esses usuários semanalmente, mensalmente ou trimestralmente? Como você vai se engajar com eles? Será apenas para novos recursos, ou para inovação e lançamentos de novos produtos? Com que frequência você exigirá que eles forneçam feedback?
    Por exemplo, em uma empresa, entramos em contato com os beta testers quando tínhamos um novo recurso que queríamos testar antes de fazermos um lançamento massivo. Não houve necessariamente um período de tempo contínuo que seguimos estritamente, mas, eu diria, falamos com os usuários quase todos os meses ou dois sobre isso. O objetivo do programa beta era desenvolver uma comunidade de usuários que pudéssemos acessar para testar novos recursos. Depois de algum tempo, também pudemos engajar esses usuários com novas ideias (testes de conceito), antes mesmo de chegarmos ao código ao vivo.
  2. Criar uma inscrição no programa beta
    Descubra um lugar onde você pode perguntar aos usuários se eles estão interessados em participar do programa beta e permitir que eles se inscrevam, seja por meio de um site ou de outra ferramenta on-line. Onde quer que o sign up vive, deve declarar o seguinte:
    – Explicar os benefícios de ingressar no programa beta
    – Detalhe os requisitos do programa beta
    Exigimos que os usuários nos dessem feedback sobre determinados recursos ou lançamentos de produtos a cada duas semanas. Obviamente dependia da escala do teste beta, mas estabelecemos um prazo muito claro. Eu agendaria as sessões de feedback com antecedência, e envie-as por e-mail com lembretes.
    Além disso, certifiquei-me de que os benefícios eram muito claros: eles puderam ver todos os novos recursos / produtos antes das massas, seus comentários fizeram mudanças visivelmente em nosso produto, ajudaram a informar nosso roteiro de produto e, a cada trimestre, enviei um cesta de presente para nossos testadores beta (uma vez que tenhamos muitos, eu mudei e tentei conseguir todos pelo menos uma vez por ano)
  3. Convidar pessoas!
    Depois que as partes internas são descobertas, é hora de convidar os usuários para se tornarem beta testers. Falei com o gerenciamento de contas e marketing para entender quem eles achavam que os melhores beta testers seriam. Eu também estava pesquisando usuários e marcando quem eu achava que eram grandes candidatos. Eu enviei um e-mail para todos eles diretamente com um link para a nossa inscrição, e me ofereci para falar com eles por telefone, se eles tivessem perguntas. Eu também perguntaria aos usuários no final das sessões de pesquisa se eles estavam interessados em participar. Depois que as pessoas participam, tente segmentá-las em grupos, como "usuários avançados", "muito dispostos a dar feedback" ou "problemas técnicos". Dessa forma, você tem uma ideia de quais usuários selecionar potencialmente para determinados beta Testes
  4. Teste beta!
    Agora vem a parte divertida, você tem seus usuários (o que, novamente, pode levar um pouco de tempo) e agora é hora de fazer o teste beta! Você pode optar por testar uma funcionalidade em todos os seus testadores beta ou pode testar versões diferentes com grupos diferentes de testadores beta. Depois de decidir, escreva um e-mail informando o que esperar depois que você ativar o recurso. Não lhes dê muito, como você quer incentivá-los a explorar por conta própria, mas que eles saibam que estão prontamente disponíveis para perguntas e feedback.
    Lembre-se de lembrar aos usuários quando eles estão agendados para sessões de feedback e como você planeja reunir o feedback deles. Fizemos 95% das nossas sessões de feedback sobre videoconferência remota
  5. Receber feedback
    Conforme mencionado, criei reuniões de feedback com nossos usuários após um período de tempo predeterminado. Eu gravei as reuniões (com permissão, é claro), tomei notas e depois reuni todo o feedback em resumos de pesquisa. Eu enviaria as empresas de pesquisa para as partes interessadas e relevantes, como a equipe do scrum que trabalhava no recurso / release, bem como marketing ou vendas.
  6. Continue o ciclo
    Depois de criar e promover uma comunidade de usuários, você descobrirá como é fácil conduzir pesquisas contínuas com os usuários. Você poderá entrar em contato com os usuários para mais do que apenas testes beta e envolvê-los em testes conceituais, testes de usabilidade e até pesquisas geradoras. É uma ferramenta muito poderosa para fazer seus usuários se sentirem ouvidos e incentivá-los a compartilhar seus pensamentos e opiniões com você

Apenas uma palavra de cautela – os testadores beta provavelmente serão os usuários avançados de seu produto. Eles não serão completamente representativos da sua base de usuários e população. Portanto, lembre-se de que nem todo o feedback deles será útil para outros usuários. Usamos o teste beta, além da pesquisa de usuários, o que significa que obtivemos uma imagem realmente holística. Não confie apenas nos testes beta, mas use-os para começar a pesquisa contínua dos usuários!