Serviços > Teste de usabilidade
Avaliação de produtos digitais com pesquisa de usuários e testes de usabilidade
Um componente chave do design centrado no usuário é a avaliação de produtos digitais com usuários reais, recrutados a partir da demografia alvo. Há uma variedade de métodos e abordagens que podem ser usados dependendo dos objetivos específicos do projeto, do estágio de desenvolvimento e da complexidade.
Existe um argumento comercial muito forte para realizar testes de usabilidade para avaliar os produtos à medida que eles estão sendo desenvolvidos. O custo da mudança é pequeno e o número de alternativas de projeto é alto e, portanto, a pesquisa de protótipos de usuários constitui uma parte fundamental do processo de desenvolvimento.
Atributos da pesquisa do usuário
Há muitas formas diferentes de realizar testes de usuários e todas contêm os seguintes atributos fundamentais:
- Eles envolvem que os usuários sejam solicitados a tentar tarefas semelhantes àquelas que eles tentariam no mundo real
- Os usuários são de alguma forma representativos do público-alvo do cliente
- Os usuários interagem com o protótipo da forma mais natural possível e fornecem feedback, geralmente usando um protocolo de reflexão em voz alta
- As observações são analisadas e são feitas recomendações para iterar o protótipo.
Com esses elementos centrais em mente, o que separa os diferentes métodos são:
- Onde a pesquisa é realizada
- Com Quantos usuários
- O que é o tema da pesquisa
- Que dados que queremos capturar
AVALIAÇÃO DA USABILIDADE
Uma avaliação de usabilidade padrão envolve de 5 a 12 participantes recrutados contra os perfis dos clientes-alvo que participam de sessões individuais (às vezes conhecidas como "profundidades") que duram entre 45 e 60 minutos. Os participantes passarão esse tempo com um pesquisador de experiência de usuário (não um designer UX) que moderará a sessão, que na maioria dos casos, eles prepararam previamente.
Processo de pesquisa
A metodologia para conduzir pesquisas qualitativas (avaliações de usabilidade) deste tipo envolve o seguinte:
- Recrutamento: Participantes recrutados contra os perfis-alvo especificados pelo cliente
- Preparação:
- A roteiro de teste e guia de discussão projetado para facilitar a interação dos participantes com o projeto
- A instalação para realizar a pesquisa
- Equipamento configurados para gravar as sessões e dispositivos para o participante usar (ou seja, tablet, smartphone, PC)
- Sessão de pesquisa:
- Qualificados moderação de cada uma das sessões
- Observação e gravação de questões
- Análise e relatórios
Números dos participantes e duração da sessão
Quando chegamos à fase de teste do projeto, estamos normalmente realizando a avaliação de usabilidade em todas as plataformas - smartphone, tablet e PC. Mas em nossa experiência, não precisamos realizar 5 sessões em cada plataforma, porque normalmente já tivemos problemas sérios em rodadas anteriores.
Na maioria dos casos, nós executamos dez ( aprox. 60 minutos ) sessões durante dois dias de pesquisacom o seguinte divididos em plataformas:
- Smartphone = 4 participantes
- PC = 4 participantes
- Tablet = 4 participantes
Geralmente descobrimos que o tablet pode ser informado pelas descobertas no smartphone e no PC, mas gostamos de realizar algumas sessões para evitar que nos falte um problema óbvio com pontos de parada e informações-chave abaixo da dobra
Facilidade de Pesquisa e Visualização
As instalações de pesquisa fornecem visualização através de um espelho unidirecional ou através de uma tela para que a equipe de projeto e as partes interessadas possam ver, em primeira mão, como os participantes se dão com os projetos em desenvolvimento. Como as pessoas que vêem estão no mesmo local que o moderador, há o oportunidade de discutir o que observam entre as sessões e começar a planejar atualizações e mudanças.
É também uma oportunidade para a equipe de projeto e as partes interessadas colaborarem e discutirem o que estão vendo como salas de visualização de instalações de pesquisa tendem a ser uma prova sólida.
No entanto, as instalações de pesquisa têm um custo e alternativamente, a pesquisa pode ser realizada em quase qualquer lugar - em salas de reunião, casas dos participantes, escritórios dos clientes, etc. Podemos transmitir as sessões através da Internet, assim visualização remota ao vivo é possível.
No entanto, há limitações que são:
- Somente a tela do dispositivo é visível e não as expressões faciais dos participantes
- A visualização de vídeo por longos períodos através da Internet pode ser um pouco duvidosa devido à natureza pesada da largura de banda do vídeo
- A resolução da tela pode dificultar a visualização de detalhes finos
Uma alternativa é rever os vídeos da sessão de alta definição que gravamos como uma questão de curso e fazer o upload para uma pasta Dropbox compartilhada. Largura de banda que nos permite fazer o upload desses vídeos à medida que vamos e compartilhar imediatamente um link para que você possa assistir com cerca de uma hora de atraso.
Equipamento de teste
Fornecemos toda a tecnologia necessária para executar as sessões de pesquisa do usuário.
Isto inclui;
- O laptop de teste que é carregado com software especializado para gravação de imagem em imagem
- Vídeo de alta definição da tela que o participante está usando mais suas expressões faciais.
- O software necessários para conectar dispositivos smartphone e tablet para que possamos gravar a tela.
A configuração que usamos para gravação móvel usa uma configuração de hardware e software que significa que o smartphone simplesmente tem o cabo de energia conectado. O participante pode pegar o telefone e segurá-lo e interagir com ele naturalmente sem nenhum acessório para câmeras aéreas, ou berços ou com o dispositivo fixado em posição sobre a mesa.
Temos uma gama de dispositivos que fornecemos para os testes, incluindo smartphones iOS e Android, tablets e PC's Microsoft. Estamos felizes em usar seus dispositivos se você precisar de nós e geralmente podemos nos conectar a eles com facilidade.
Roteiro de Teste, Moderação, Análise e Relatórios
Todos os nossos projetos são conduzidos por uma de nossas equipes de consultores UX altamente experientes, que foram avaliados e premiados de forma independente Praticante Credenciado status. Todos nossos consultores têm um mínimo de 5 anos de experiência, as qualificações necessárias mais as capacidades para executar este tipo de pesquisa de projeto.
Roteiro de teste
Em discussão com o cliente, nosso consultor UX desenvolver o roteiro de teste que inclui as tarefas e cenários que orientarão a interação dos participantesAlém de todas as perguntas que você precisa responder através da pesquisa.
Documentamos isto dentro de um Plano de pesquisaA pesquisa, que contém todos os outros detalhes relativos à pesquisa, é compartilhada com você para iteração e assinatura. Uma estrutura de sessão típica pode se parecer com esta:
- Antes de começar
- Discussão sobre o contexto de uso, comportamentos atuais e atitudes em relação ao tema da pesquisa.
- Tarefas
- Criaremos tarefas que abrangem as principais viagens, interações, características e funções a serem avaliadas.
- Perguntas relacionadas a tarefas que o moderador deve assegurar que sejam respondidas.
- Entrevista de Encerramento
- Uma discussão sobre sua experiência
Moderação
Todos os nossos consultores têm muitos anos de experiência realizando pesquisas deste tipo e, a menos que solicitado de outra forma, nossa abordagem à moderação é o seguinte:
- Comunicar verbalmente as tarefas aos participantes para evitar a formalidade
- Para permitir que o usuário interaja livremente com o protótipo e não para conduzi-lo
- Somente interromper o usuário quando ele estiver hesitante ou confuso e se isso não resultar na perda do ímpeto da tarefa ou de potenciais aprendizados de seu comportamento
- Para questioná-los após uma tarefa ou sub-tarefa, se necessário
Ocasionalmente, fomos solicitados por outros clientes a operar uma abordagem mais formal de moderação e temos o prazer de alterar nosso estilo, se necessário.
Durante as sessões de teste do usuário, o moderador estará observando a sessão e fazendo anotações que usarão mais tarde para análise. Estas podem ser notas com carimbo de tempo para que possam consultá-las mais tarde e rever o vídeo das sessões.
Análise e relatórios
Após a pesquisa, eles realizarão a análise e começarão a criar o relatório - se isso for o que for necessário. Nos casos em que o relatório é exigido, seguimos os padrões de relatórios de melhores práticas da Experiência do Usuário.
Nós utilizamos um esquema de relatórios de semáforos para categorizar as observações e atribuir classificações de severidade como mostrado abaixo:
Esquema de relatórios de semáforos
ESTUDO DE CASO:
Em estudo generativo para uma cadeia de hotéis, revisamos um aplicativo existente antes do processo de redesenho. O recrutamento visou participantes de toda a sua base de usuários, incluindo usuários comerciais e consumidores, grupos e indivíduos. As viagens de navegação e busca foram rigorosamente testadas, mas também o pagamento, gerenciamento de contas, mensagens de e-mail e esquema de fidelidade. O estudo também incluiu a visita a aplicativos concorrentes para que os usuários pudessem identificar áreas que preferiam que pudessem ser referenciadas no redesenho.
Este estudo foi realizado em uma instalação de pesquisa porque o cliente queria ouvir o feedback em primeira mão, mas não é incomum que esta etapa de pesquisa ocorra em casa dos usuários, como fizemos para uma companhia de comparação de seguros antes da reformulação, ou nos escritórios ou salas de reuniões dos clientes. A decisão geralmente se resume ao custo, disponibilidade para passar alguns dias fora do escritório e localização dos usuários. Os vídeos das sessões são sempre fornecidos (gratuitamente por nós) para que você ainda possa ver o que aconteceu, mesmo que não possa comparecer.
TESTE DE PROJETO DE PROCESSO
Os testes de projeto de processo ocorrem antes de qualquer meio interativo ser criado para garantir que o fluxo de trabalho e as etapas do processo suportem as interações desejadas pelo usuário. Envolve a participação dos usuários em sessões de pesquisa qualitativa individuais e a interação com cartões de processo codificados por cores criados para representar cada aspecto do processo ou jornada.
Preparação para a Pesquisa
A abordagem dos testes de processo é muito semelhante àquela utilizada para testes de usabilidade com os elementos centrais presentes:
- Os ativos de teste
- Os participantes
- A localização da pesquisa
- A preparação, moderação, análise e relatórios.
O maior diferenças com testes de processo é que os ativos de teste têm que ser criados e o relatório é normalmente na forma de projetos de processo revisados.
Os projetos de processo podem ser entregues a nós como mapas de viagem do usuário, utilizar fluxos de trabalho de casos, diagramas de fluxo de processo e muito mais. Estes recursos explicam como o processo irá funcionar, as possíveis interações, caminhos de erro, fluxos alternativos, critérios de sucesso e muito mais. Mas, eles não podem ser colocados na frente dos usuários nesta forma, pois eles simplesmente os confundirão.
CARTÕES DE PROCESSO:
A abordagem que adotamos é desenvolver cartões de processo codificados por cores que representam diferentes atributos no processo.
Um projeto recente incluiu os seguintes tipos de cartões:
É freqüente que esta etapa do processo, por si só, gere problemas e omissões dos processos que podem ser retificados antes que os testes com o usuário sejam realizados. Por esse motivo, recomendamos que se dê tempo adicional no projeto para que esta etapa passe por algumas rodadas de iteração.
Realização dos testes
Se você observou o teste de usabilidade da sala de visualização em uma instalação de pesquisa, você já terá uma boa idéia do que acontece com os testes de processo. Os participantes são recrutados contra o perfil do usuário alvo (persona) e participam de uma sessão de 45 a 60 minutos por conta própria e moderada por um consultor sênior da UX. Após eles se sentarem e se sentirem relaxados com algumas perguntas iniciais, começamos os testes de processo.
Cada conjunto de cartões de processo representa uma viagem ou sub-jornada do usuário e o primeiro cartão do conjunto é a história do usuário. O participante recebe o cartão de história de usuário e é solicitado a lê-la. O cartão pode dizer algo como:
- Você quer entrar em sua conta bancária online
- Você procura pelo bank.co.uk para visualizar sua conta e clicar na tela de login.
- Você não se lembra de seus dados de logon e o site o aconselha a entrar em contato com o suporte
Como você irá proceder?
O usuário terá uma série de escolhas apresentadas no cartão e estas levarão a diferentes rotas através do processo por meio de cartões associados.
Nosso objetivo na pesquisa é entender se o processo suporta a forma como o usuário quer interagir de forma natural. Observando seu comportamento, ouvindo seus processos de pensamento verbalizados e feedback, podemos refinar e otimizar os processos.
Compartilhando as descobertas
A melhor maneira de compartilhar as conclusões dos testes de processo é fornecer mapas ou fluxos de processo revisados como o principal entregável. A relatório fornece a narrativa do porquê do processo ter mudado ou sido alterado da forma como foi alterado. Ele dará cada passo em cada processo e identificará o que funcionou e o que não funcionou e como ele precisa mudar ou ser adaptado.
Juntos, estes produtos informarão como os wireframes ou protótipos devem ser projetados para apoiar a jornada e o processo do usuário.
TESTES COMPARATIVOS DE USABILIDADE
Os testes comparativos de protótipos são realizados quando há mais de uma alternativa de projeto de protótipo a ser avaliada. Isto acontece quando a equipe de projeto apresenta mais de uma solução para um caso ou requisito de uso particular. O teste do usuário é uma das formas de determinar qual abordagem deve ser selecionada.
CONTRABALANÇANDO:
Para garantir que a avaliação de múltiplos protótipos seja imparcial, usamos um método chamado contrapeso. Em vez de ter cada usuário interagindo com os protótipos na mesma ordem, ou seja, protótipo 'a', protótipo 'b', depois 'c' e assim por diante, alternamos a ordem para que cada protótipo seja interativo com o mesmo número de vezes e na mesma ordem.
O seguinte é um verdadeiro protocolo de teste de um projeto onde havia três versões de protótipos (dois somente no smartphone) e em três plataformas:
| Dia/Participante | Desktop | Tablet | Smartphone | |||||
| Dia 1 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 |
| 1 | 1o. | 2o. | 3o. | 6o. | 5o. | 4o. | ||
| 2 | 2o. | 3o. | 1o. | 4o. | 6o. | 5o. | ||
| 3 | 3o. | 1o. | 2o. | 5o. | 4o. | 6o. | ||
| 4 | 1o. | 2o. | 3o. | 5o. | 4o. | |||
| 5 | 2o. | 3o. | 1o. | 5o. | 4o. | |||
| 6 | 3o. | 1o. | 2o. | 4o. | 5o. | |||
| Dia 2 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 |
| 1 | 5o. | 4o. | 3o. | 1o. | 2o. | |||
| 2 | 3o. | 5o. | 4o. | 2o. | 1o. | |||
| 3 | 4o. | 3o. | 5o. | 1o. | 2o. | |||
| 4 | 1o. | 2o. | 3o. | 5o. | 4o. | 3o. | ||
| 5 | 1o. | 2o. | 3o. | 5o. | 4o. | |||
| 6 | 5o. | 4o. | 3o. | 1o. | 2o. | |||
Exemplo de protocolo de teste
Este tipo de teste depende de o moderador estar bem organizado e fazer boas anotações e pode ser muito útil ter um anotador além do moderador para acompanhar as versões e a ordem
AVALIAÇÃO COMPARATIVA
As avaliações de benchmarking são quando estamos avaliando um protótipo em relação a alternativas ao vivo. Os projetos que executamos incluíram apenas o live site ou live site mais os concorrentes. O objetivo é sempre avaliar se o protótipo em desenvolvimento atende a qualquer falha percebida no site ao vivo, ou se é tão bom quanto os concorrentes.
Realização da Avaliação
O teste montado é muito simples, pois as tarefas e cenários a serem utilizados são idênticos tanto para o protótipo quanto ao vivo. Usaremos uma abordagem de contrapeso para garantir que qualquer tendência seja removida e que as versões ao vivo e protótipo sejam vistas primeiro e segundo um número igual de vezes.
O participante irá interagir com cada um, um após o outro, tentando a mesma tarefa e fornecendo feedback verbal mais comportamentos observados.
Os critérios contra os quais a comparação é feita precisam ser bem pensados e as tarefas e o protocolo de teste planejados de acordo. Os participantes nem sempre podem dar o salto do protótipo para a vida e, portanto, seu feedback pode ser baseado em um julgamento injusto.
Se nos tivermos preparado bem, podemos ignorar isso e nos concentrar nas áreas-chave, tais como;
- Interação
- Viagem do usuário
- Função das características
Estes serão a base para a benchmark e o formato de pontuação / relatório concordamos com você.
ESTUDO DE CASO:
Um de nossos clientes do hotel estava desenvolvendo um novo aplicativo e nos pede para realizar uma avaliação comparativa do aplicativo protótipo em desenvolvimento versus o aplicativo ao vivo existente. Usamos um contrapeso para garantir que os 6 participantes interagissem com o protótipo e o aplicativo ao vivo em uma ordem 1:2 igualmente. A entrega incluiu um benchmark detalhado dos pontos fortes e fracos comparativos do aplicativo ao vivo versus o protótipo.
Tem um projeto em mente?
