Escolha entre testes de usabilidade moderados, não moderados ou assíncronos, de acordo com a decisão que você precisa tomar para concluir o processo.

Escolha entre testes de usabilidade moderados, não moderados ou assíncronos, de acordo com a decisão que você precisa tomar para concluir o processo.

A maioria das equipes escolhe um método de teste de usabilidade com base no orçamento ou no hábito, e depois descobre que as sessões não conseguem responder à pergunta que as motivou. O método não é uma questão de gosto; ele é definido pela decisão que você está tentando tomar. Este guia oferece uma abordagem prática para escolher entre testes moderados, não moderados e assíncronos: o tamanho da amostra que cada um suporta, o custo e a qualidade dos dados envolvidos, e as regras de transferência de dados que restringem a escolha na Turquia e na UE. Ele é voltado para equipes de produto, UX e CRO que realizam alguns estudos por ano e não podem se dar ao luxo de desperdiçar nenhum. Primeiramente, um dado importante: no estudo de Laura Faulkner, de 2003, amostras aleatórias de cinco usuários encontraram, em média, 85.5% dos problemas conhecidos, mas a pior amostra de cinco usuários encontrou apenas 55%.

Os três métodos, definidos com precisão suficiente para serem comparados.

Moderado. O pesquisador e o participante estão juntos na sessão, presencialmente ou por chamada telefônica. O pesquisador define as tarefas, observa e investiga. Resultado: comportamento observado mais explicação.

Sem moderação, gravado. O participante trabalha sozinho seguindo um conjunto de tarefas predefinidas, enquanto uma plataforma captura a tela, os cliques e, geralmente, o áudio. Um pesquisador analisa as gravações posteriormente. Resultado: comportamento sem explicação.

Autorrelato assíncrono. O participante trabalha sozinho e anota o que deu errado — um estudo em forma de diário, um formulário de feedback, uma tarefa anotada. Nenhuma gravação é analisada. Resultado: o relato do próprio participante.

Agrupar esses três em "moderado vs. não moderado" é como um dado amplamente repetido acaba sendo aplicado incorretamente. A descoberta de que os usuários relatam aproximadamente metade dos problemas observados por um pesquisador treinado vem de estudos de autorrelato, onde os participantes documentaram os problemas por conta própria. Isso é um fato sobre autorrelato assíncrono, não sobre sessões gravadas sem moderação e analisadas por um pesquisador. Quando alguém diz que a abordagem sem moderação encontra metade dos problemas, pergunte a qual das duas se refere.

Comece pela decisão, não pelo método.

Escreva a frase que você quer ser capaz de dizer quando o estudo terminar e, em seguida, encontre a linha correspondente.

A decisão que você precisa tomar.Evidências que a encerramForma
Por que as pessoas desistem nessa etapa?Comportamento e o raciocínio por trás dele.Moderado
Esse conceito é compreendido por alguém?A compreensão foi avaliada nas próprias palavras do usuário.Moderado
Isso funciona com um leitor de tela?Uso observado por pessoas que usam um diariamente.Moderado
As pessoas conseguem realizar a tarefa X sem ajuda?Taxa de conclusão com intervalo de confiançaSem moderação, gravado
Qual layout produz menos erros?Uma métrica comparativa com um tamanho de amostra que possa separá-los.Sem moderação, gravado
Como é uma semana de uso real?Entradas repetidas ao longo dos diasDiário assíncrono
Qual mudança nos faz ganhar mais dinheiro?Um experimento ao vivo com tráfego real.Nenhuma das três opções — realize um teste A/B.

A última linha importa mais do que parece. Os testes de usabilidade indicam se uma interface pode ser usada e onde ela falha, não o impacto da mudança na receita. Um estudo com cinco pessoas, solicitado a responder a uma questão de métrica de negócios, é o instrumento errado, e sua resposta não resistirá ao contato com o funil de vendas.

A tela de quatro perguntas

Se a tabela não contiver sua pergunta, execute-as em ordem. O primeiro "sim" decide.

  1. Você precisa perguntar "por quê?" enquanto isso está acontecendo? Moderado. Não é possível adicionar uma sonda a uma gravação posteriormente.
  2. O participante precisa de credenciais, um ambiente de teste, tecnologia assistiva ou um dispositivo fornecido por você? Moderado. Plataformas não moderadas lidam bem com um protótipo público, mas mal com um ambiente restrito.
  3. Você precisa de um número com um intervalo de confiança associado? Sem moderação. Oito sessões moderadas produzem uma taxa de conclusão com um intervalo tão amplo que não permite distinguir 50% de 90%.
  4. O comportamento se repete em mais de uma sessão? Assíncrono. Um processo de integração que se estende por uma semana, ou uma reserva abandonada e retomada, não caberá em uma sessão de 60 minutos.

Tamanho da amostra: o que cada método suporta.

A regra "cinco usuários são suficientes" vem de Artigo de Jakob Nielsen de 2000 e só se aplica, em média, à descoberta de problemas, em um único fluxo. Faulkner utilizou um aplicativo de controle de horas com 60 participantes, catalogou 45 problemas e, em seguida, reamostrou 100 grupos aleatórios de cada tamanho. A dispersão é o que todos esquecem.

UtilizadoresPercentagem média de problemas encontradosPior amostra em 100 sorteios.
585.5%55%
1094.7%82%
2098.4%95%
3099.0%97%
50100%98%

Leia isso como uma declaração de risco, não como uma meta. Cinco sessões geralmente revelam a maior parte dos problemas, e aproximadamente uma em cada vinte sessões leva você a acreditar que um fluxo com problemas é aceitável — o que é bom para um protótipo, mas ruim para um checkout que você está prestes a lançar. Nossa divisão de trabalho: de 5 a 8 sessões moderadas para descoberta em um único fluxo, de 10 a 12 quando ele se ramifica por segmento ou dispositivo, e 30 ou mais sessões não moderadas quando o resultado esperado é uma taxa, e não uma lista de problemas.

Custo e cronograma: para onde vai o dinheiro de fato?

O custo moderado refere-se principalmente à agenda do pesquisador — agendamento, faltas, a sessão em si e, por fim, a análise. O custo não moderado, por sua vez, refere-se principalmente ao recrutamento excessivo, pois paga-se por participantes descartados, e essa taxa de descarte é maior do que a maioria dos orçamentos prevê.

Em um artigo do Comparação de cinco plataformas de pesquisa na PLOS ONE em 2023. (N = 2,729), a proporção de respondentes que atenderam a um padrão de qualidade combinado foi de 75.4% no Prolific, 75.1% no CloudResearch, 62.7% no SONA, 59.1% no Qualtrics e 54.2% no MTurk, com o custo por respondente de alta qualidade variando de US$ 1.90 a US$ 8.17. Estudo de 2026 em Qualidade e Quantidade é mais rigoroso: dos 4,453 participantes que consentiram, 15.97% foram mantidos após a triagem, com verificações de atenção desqualificando 27.13%, enquanto perguntas explícitas de detecção de bots identificaram apenas 3.48%.

Portanto, dimensione os estudos não moderados com base no número de participantes que você precisa analisar, dividido pela taxa de retenção esperada, e inclua pelo menos uma pergunta aberta e uma verificação de atenção em cada roteiro, porque filtros automatizados baratos não funcionam. Uma sessão moderada se auto-filtra: alguém que participa de uma chamada e conversa com você por 45 minutos é, independentemente de qualquer outra coisa, uma pessoa.

[SÃO NECESSÁRIA A DADOS INTERNOS: Mediana de dias da Switas desde o briefing de recrutamento até a primeira sessão concluída, e nossa taxa de exclusão observada em estudos não moderados em língua turca, para substituir os dados genéricos da plataforma acima.]

A camada Turquia-UE que pode substituir sua escolha.

Uma plataforma não moderada grava a tela do participante, frequentemente sua voz e rosto, e armazena esses dados na infraestrutura do fornecedor, geralmente fora da Turquia e, muitas vezes, fora do Espaço Econômico Europeu (EEE). Isso configura uma transferência de dados pessoais para o exterior e, desde 1º de junho de 2024, a legislação turca regula essas transferências por meio de um conjunto específico de mecanismos.

A Lei 7499 (Diário Oficial 32487, 12 de março de 2024) reformulou o Artigo 9 da Lei 6698. As transferências para o exterior agora exigem uma decisão de adequação ou uma salvaguarda listada: regras corporativas vinculativas aprovadas previamente, um contrato padrão publicado pela Autoridade e notificado a ela, ou um compromisso específico por ela aprovado. Os fundamentos excepcionais, incluindo o consentimento explícito, são elaborados para transferências incidentais e não recorrentes — o que não se aplica a um programa de pesquisa permanente. Como o Página da própria Autoridade Até o momento, nenhum país foi declarado adequado para testes, portanto, na prática, uma plataforma de testes estrangeira depende de um contrato padrão que alguém precisa assinar e notificar.

A regra que aplicamos é a seguinte: se o estudo captura a conta pessoal de um participante, dados reais de clientes ou informações de categoria especial — algo comum em trabalhos na área da saúde e no setor público —, sessões moderadas em infraestrutura controlada por você representam o caminho mais curto para a conformidade, mesmo quando as sessões não moderadas são mais baratas. Para um protótipo público e uma tarefa sintética, a abordagem por plataforma é adequada. Leitores fora da Turquia reconhecerão a estrutura do Capítulo V do GDPR, com uma diferença importante: não há uma decisão de adequação em vigor, portanto, não existe uma estrutura semelhante à do GDPR para se basear.

Antes de reservar qualquer coisa

  • A sentença de decisão está escrita, e você pode nomear a descoberta que a alteraria.
  • O método foi obtido da tabela ou da tela acima, não do que você executou da última vez.
  • O tamanho da amostra é justificado em relação ao resultado esperado: uma lista de problemas ou uma taxa.
  • Somente sem moderação: número alvo (n) dividido pela retenção esperada; o roteiro contém uma pergunta aberta e uma verificação de atenção.
  • Moderação apenas: tarefas elaboradas de forma que o participante não precise de explicações; perguntas de sondagem preparadas, mas não direcionadas.
  • O registro, o local de armazenamento, o período de retenção e o mecanismo de transferência foram definidos antes do recrutamento.
  • Alguém é o responsável pelo calendário de análises; gravações não analisadas são a prova de que estudos não moderados não produzem nada.

Onde isso falha

A tabela de Faulkner provém de um aplicativo de controle de horas com 45 problemas catalogados. As curvas de descoberta dependem da probabilidade de um participante médio se deparar com um problema médio, e essa probabilidade diminui em um produto com muitos fluxos ramificados. Considere a tabela como um limite inferior para um fluxo simples.

Este guia não aborda os mecanismos de recrutamento, a técnica de moderação, a transformação das descobertas em hipóteses ou os testes de conformidade de acessibilidade, que são uma auditoria em relação a critérios, e não um estudo de usabilidade.

As entrevistas moderadas por IA situam-se agora entre as moderadas e as não moderadas, sendo comercializadas como uma combinação de ambas. Não encontramos evidências publicadas de comparação entre os métodos com o mesmo nível de qualidade dos estudos aqui citados. Até que isso aconteça, considere uma sessão moderada por IA como um teste não moderado com um roteiro melhor e não permita que ela influencie decisões que dependam de questionamentos habilidosos.

Perguntas frequentes

Cinco participantes são realmente suficientes? Em média, cinco pessoas encontram cerca de 85% dos problemas em um único teste, mas o pior dos 100 testes de cinco pessoas de Faulkner encontrou apenas 55%. Razoável para um protótipo, mas insuficiente para qualquer produto que você esteja prestes a lançar no mercado.

Posso realizar um estudo moderado remotamente? Sim, e para a maioria dos trabalhos de produto, você deveria. A moderação se refere à presença de um pesquisador, não a uma sala específica. Você perde o contexto ambiental e ganha alcance.

De quantos participantes preciso para atingir uma taxa de conclusão? Mais do que um estudo moderado pode oferecer. Primeiro, decida qual diferença você precisa detectar — separar 70% de 85% requer uma amostra muito diferente de separar 30% de 80% — depois, dimensione a amostra de acordo com essa diferença e espere descartar um quarto dos participantes.

Os testes não moderados encontram menos problemas do que os testes moderados? Sessões gravadas e não moderadas, analisadas por um pesquisador, revelam um conjunto comparável de problemas comportamentais, mas nenhuma explicação. A cifra de "metade dos problemas" aplica-se a formatos de autorrelato em que ninguém observa a sessão.

É necessário consentimento explícito para gravar uma sessão? Independentemente do método escolhido, você precisa de uma base legal e de um aviso claro, e na Turquia a questão da transferência para o exterior é distinta da questão do registro.

Qual deve ser a duração de um conjunto de tarefas não moderadas? Normalmente, de 15 a 20 minutos. Roteiros mais longos aumentam a taxa de desistência e recompensam exatamente os participantes que você deseja excluir.

Trabalhe conosco

Se uma decisão depende de evidências e você não tem certeza de qual desses três fatores será decisivo, podemos definir o escopo do estudo com você — método, tamanho da amostra, recrutamento e documentação para transferência de dados. Veja Serviços de pesquisa de usuários da Switas.

Fontes


Inci Dindar
Escrito por

Inci Dindar

Com experiência em Desenvolvimento de Software, ela liderou equipes de design, UX e produto em empresas de fintech, mídia, e-commerce e turismo. Nos últimos três anos, atuou como consultora em tempo integral em UX e design — inclusive como consultora externa de UX para uma consultoria de gestão global, auxiliando marcas e startups com auditorias, otimização de conversão e processos de design.


Artigos Relacionados

Switas como visto em

Magnify: Escalonando o marketing de influência com Engin Yurtdakul

Confira nosso estudo de caso do Microsoft Clarity

Destacamos o Microsoft Clarity como um produto desenvolvido com casos de uso práticos e reais em mente, por profissionais de produto que entendem os desafios enfrentados por empresas como a Switas. Recursos como cliques de raiva e rastreamento de erros em JavaScript se mostraram essenciais para identificar frustrações dos usuários e problemas técnicos, permitindo melhorias direcionadas que impactaram diretamente a experiência do usuário e as taxas de conversão.