Avaliação de produtos digitais com pesquisa de usuários e testes de usabilidade
Um componente chave do design centrado no usuário é a avaliação de produtos digitais com usuários reais, recrutados a partir da demografia alvo. Há uma variedade de métodos e abordagens que podem ser usados dependendo dos objetivos específicos do projeto, do estágio de desenvolvimento e da complexidade.
Existe um argumento comercial muito forte para realizar testes de usabilidade para avaliar os produtos à medida que eles estão sendo desenvolvidos. O custo da mudança é pequeno e o número de alternativas de projeto é alto e, portanto, a pesquisa de protótipos de usuários constitui uma parte fundamental do processo de desenvolvimento.
Atributos da pesquisa do usuário
Há muitas formas diferentes de realizar testes de usuários e todas contêm os seguintes atributos fundamentais:
- Eles envolvem que os usuários sejam solicitados a tentar tarefas semelhantes àquelas que eles tentariam no mundo real
- Os usuários são, de alguma forma, representativos do público-alvo do cliente
- Os usuários interagem com o protótipo da forma mais natural possível e fornecem feedback, geralmente usando um protocolo de reflexão em voz alta
- As observações são analisadas e são feitas recomendações para iterar o protótipo.
Com esses elementos centrais em mente, o que separa os diferentes métodos são:
- Onde a pesquisa é realizada
- Com Quantos usuários
- O que é o tema da pesquisa
- Que dados que queremos capturar
AVALIAÇÃO DA USABILIDADE
Processo de pesquisa
A metodologia para conduzir pesquisas qualitativas (avaliações de usabilidade) deste tipo envolve o seguinte:
- Recrutamento: Participantes recrutados contra os perfis-alvo especificados pelo cliente
- Preparação:
- A roteiro de teste e guia de discussão projetado para facilitar a interação dos participantes com o projeto
- A instalação para realizar a pesquisa
- Equipamento configurados para gravar as sessões e dispositivos para o participante usar (ou seja, tablet, smartphone, PC)
- Sessão de pesquisa:
- Qualificados moderação de cada uma das sessões
- Observação e gravação de questões
- Análise e relatórios
Números dos participantes e duração da sessão
Quando chegamos ao estágio de teste de design, normalmente realizamos a avaliação de usabilidade em todas as plataformas: smartphone, tablet e PC. Mas, de acordo com nossa experiência, não precisamos executar cinco sessões em cada plataforma porque normalmente já eliminamos problemas sérios nas rodadas anteriores.
Na maioria dos casos, nós executamos dez ( aprox. 60 minutos ) sessões durante dois dias de pesquisacom o seguinte divididos em plataformas:
- Smartphone = 4 participantes
- PC = 4 participantes
- Tablet = 4 participantes
Geralmente descobrimos que o tablet pode ser informado pelas descobertas no smartphone e no PC, mas gostamos de realizar algumas sessões para evitar que nos falte um problema óbvio com pontos de parada e informações-chave abaixo da dobra
Facilidade de Pesquisa e Visualização
As instalações de pesquisa fornecem visualização através de um espelho unidirecional ou através de uma tela para que a equipe de projeto e as partes interessadas possam ver, em primeira mão, como os participantes se dão com os projetos em desenvolvimento. Como as pessoas que vêem estão no mesmo local que o moderador, há o oportunidade de discutir o que observam entre as sessões e começar a planejar atualizações e mudanças.
É também uma oportunidade para a equipe de projeto e as partes interessadas colaborarem e discutirem o que estão vendo como salas de visualização de instalações de pesquisa tendem a ser uma prova sólida.
No entanto, as instalações de pesquisa têm um custo e alternativamente, a pesquisa pode ser realizada em quase qualquer lugar ? em salas de reunião, residências de participantes, escritórios de clientes etc. Podemos transmitir as sessões pela Internet para que visualização remota ao vivo é possível.
No entanto, há limitações que são:
- Somente a tela do dispositivo é visível e não as expressões faciais dos participantes
- A visualização de vídeo por longos períodos através da Internet pode ser um pouco duvidosa devido à natureza pesada da largura de banda do vídeo
- A resolução da tela pode dificultar a visualização de detalhes finos
Uma alternativa é rever os vídeos da sessão de alta definição que gravamos como uma questão de curso e fazer o upload para uma pasta Dropbox compartilhada. Largura de banda que nos permite fazer o upload desses vídeos à medida que vamos e compartilhar imediatamente um link para que você possa assistir com cerca de uma hora de atraso.
Equipamento de teste
Fornecemos toda a tecnologia necessária para executar as sessões de pesquisa do usuário.
Isto inclui;
- O laptop de teste que é carregado com software especializado para gravação de imagem em imagem
- Vídeo de alta definição da tela que o participante está usando mais suas expressões faciais.
- O software necessários para conectar dispositivos smartphone e tablet para que possamos gravar a tela.
A configuração que usamos para gravação móvel usa uma configuração de hardware e software que significa que o smartphone simplesmente tem o cabo de energia conectado. O participante pode pegar o telefone e segurá-lo e interagir com ele naturalmente sem nenhum acessório para câmeras aéreas, ou berços ou com o dispositivo fixado em posição sobre a mesa.
Temos uma variedade de dispositivos que fornecemos para os testes, incluindo smartphones iOS e Android, tablets e PCs da Microsoft. Teremos prazer em usar seus dispositivos, se você precisar, e geralmente podemos nos conectar a eles com facilidade.
Roteiro de Teste, Moderação, Análise e Relatórios
Todos os nossos projetos são conduzidos por uma de nossas equipes de consultores UX altamente experientes, que foram avaliados e premiados de forma independente Praticante Credenciado status. Todos nossos consultores têm um mínimo de 5 anos de experiência, as qualificações necessárias mais as capacidades para executar este tipo de pesquisa de projeto.
Roteiro de teste
Em discussão com o cliente, nosso consultor UX Desenvolver o roteiro de teste que inclui as tarefas e os cenários que orientarão a interação dos participantes.Além de todas as perguntas que você precisa responder através da pesquisa.
Documentamos isto dentro de um Plano de pesquisaA pesquisa, que contém todos os outros detalhes relativos à pesquisa, é compartilhada com você para iteração e assinatura. Uma estrutura de sessão típica pode se parecer com esta:
- Antes de começar
- Discussão sobre o contexto de uso, comportamentos atuais e atitudes em relação ao tema da pesquisa.
- Tarefas
- Criaremos tarefas que abrangem as principais viagens, interações, características e funções a serem avaliadas.
- Perguntas relacionadas a tarefas que o moderador deve assegurar que sejam respondidas.
- Entrevista de Encerramento
- Uma discussão sobre sua experiência
Moderação
Todos os nossos consultores têm muitos anos de experiência realizando pesquisas deste tipo e, a menos que solicitado de outra forma, nossa abordagem à moderação é o seguinte:
- Comunicar verbalmente as tarefas aos participantes para evitar a formalidade
- Para permitir que o usuário interaja livremente com o protótipo e não para conduzi-lo
- Interromper o usuário somente quando ele estiver hesitante ou confuso e se isso não resultar na perda do ritmo da tarefa ou em possíveis aprendizados com o comportamento dele
- Para questioná-los após uma tarefa ou sub-tarefa, se necessário
Ocasionalmente, fomos solicitados por outros clientes a operar uma abordagem mais formal de moderação e temos o prazer de alterar nosso estilo, se necessário.
Durante as sessões de teste do usuário, o moderador estará observando a sessão e fazendo anotações que usarão mais tarde para análise. Estas podem ser notas com carimbo de tempo para que possam consultá-las mais tarde e rever o vídeo das sessões.
Análise e relatórios
Após a pesquisa, eles realizarão a análise e começarão a criar o relatório... se esse for o resultado exigido. Quando o relatório é necessário, seguimos os padrões de relatório das práticas recomendadas de experiência do usuário.
Nós utilizamos um esquema de relatórios de semáforos para categorizar as observações e atribuir classificações de severidade como mostrado abaixo:
Esquema de relatórios de semáforos
ESTUDO DE CASO:
Em estudo generativo para uma cadeia de hotéis, revisamos um aplicativo existente antes do processo de redesenho. O recrutamento visou participantes de toda a sua base de usuários, incluindo usuários comerciais e consumidores, grupos e indivíduos. As viagens de navegação e busca foram rigorosamente testadas, mas também o pagamento, gerenciamento de contas, mensagens de e-mail e esquema de fidelidade. O estudo também incluiu a visita a aplicativos concorrentes para que os usuários pudessem identificar áreas que preferiam que pudessem ser referenciadas no redesenho.
Esse estudo foi realizado em uma instalação de pesquisa porque o cliente queria ouvir o feedback em primeira mão, mas não é incomum que esse estágio da pesquisa seja realizado nas casas dos usuários, como fizemos para uma empresa de comparação de seguros antes do redesenho, ou nos escritórios ou salas de reunião dos clientes. A decisão geralmente se resume ao custo, à disponibilidade de passar alguns dias fora do escritório e à localização dos usuários. Os vídeos das sessões são sempre fornecidos (gratuitamente por nós) para que você possa ver o que aconteceu, mesmo que não possa comparecer.
TESTE DE PROJETO DE PROCESSO
Preparação para a Pesquisa
A abordagem dos testes de processo é muito semelhante àquela utilizada para testes de usabilidade com os elementos centrais presentes:
- Os ativos de teste
- Os participantes
- A localização da pesquisa
- A preparação, moderação, análise e relatórios.
O maior diferenças com testes de processo é que os ativos de teste têm que ser criados e o relatório é normalmente na forma de projetos de processo revisados.
Os projetos de processo podem ser entregues a nós como mapas de viagem do usuário, utilizar fluxos de trabalho de casos, diagramas de fluxo de processo e muito mais. Estes recursos explicam como o processo irá funcionar, as possíveis interações, caminhos de erro, fluxos alternativos, critérios de sucesso e muito mais. Mas, eles não podem ser colocados na frente dos usuários nesta forma, pois eles simplesmente os confundirão.
CARTÕES DE PROCESSO:
A abordagem que adotamos é desenvolver cartões de processo codificados por cores que representam diferentes atributos no processo.
Um projeto recente incluiu os seguintes tipos de cartões:
É freqüente que esta etapa do processo, por si só, gere problemas e omissões dos processos que podem ser retificados antes que os testes com o usuário sejam realizados. Por esse motivo, recomendamos que se dê tempo adicional no projeto para que esta etapa passe por algumas rodadas de iteração.
Realização dos testes
Se você observou o teste de usabilidade da sala de visualização em uma instalação de pesquisa, você já terá uma boa idéia do que acontece com os testes de processo. Os participantes são recrutados contra o perfil do usuário alvo (persona) e participam de uma sessão de 45 a 60 minutos por conta própria e moderada por um consultor sênior da UX. Após eles se sentarem e se sentirem relaxados com algumas perguntas iniciais, começamos os testes de processo.
Cada conjunto de cartões de processo representa uma viagem ou sub-jornada do usuário e o primeiro cartão do conjunto é a história do usuário. O participante recebe o cartão de história de usuário e é solicitado a lê-la. O cartão pode dizer algo como:
- Deseja fazer login em sua conta bancária on-line
- Você procura pelo bank.co.uk para visualizar sua conta e clicar na tela de login.
- Você não se lembra de seus dados de logon e o site o aconselha a entrar em contato com o suporte
Como você irá proceder?
O usuário terá uma série de escolhas apresentadas no cartão e estas levarão a diferentes rotas através do processo por meio de cartões associados.
Nosso objetivo na pesquisa é entender se o processo suporta a forma como o usuário quer interagir de forma natural. Observando seu comportamento, ouvindo seus processos de pensamento verbalizados e feedback, podemos refinar e otimizar os processos.
Compartilhando as descobertas
A melhor maneira de compartilhar as conclusões dos testes de processo é fornecer mapas ou fluxos de processo revisados como o principal entregável. A relatório fornece a narrativa sobre o motivo pelo qual o processo mudou ou foi alterado da maneira que foi. Ele abordará cada etapa de cada processo e identificará o que funcionou, o que não funcionou e como ele precisa ser alterado ou adaptado.
Juntos, estes produtos informarão como os wireframes ou protótipos devem ser projetados para apoiar a jornada e o processo do usuário.
TESTES COMPARATIVOS DE USABILIDADE
CONTRABALANÇANDO:
Para garantir que a avaliação de vários protótipos seja imparcial, usamos um método chamado contrabalanceamento. Em vez de fazer com que cada usuário interaja com os protótipos na mesma ordem, ou seja, protótipo ?a?, protótipo ?b?, depois ?c? e assim por diante, alternamos a ordem de modo que cada protótipo seja interagido com o mesmo número de vezes e na mesma ordem.
O seguinte é um verdadeiro protocolo de teste de um projeto onde havia três versões de protótipos (dois somente no smartphone) e em três plataformas:
Dia/Participante | Desktop | Tablet | Smartphone | |||||
Dia 1 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 |
1 | 1o. | 2o. | 3o. | 6o. | 5o. | 4o. | ||
2 | 2o. | 3o. | 1o. | 4o. | 6o. | 5o. | ||
3 | 3o. | 1o. | 2o. | 5o. | 4o. | 6o. | ||
4 | 1o. | 2o. | 3o. | 5o. | 4o. | |||
5 | 2o. | 3o. | 1o. | 5o. | 4o. | |||
6 | 3o. | 1o. | 2o. | 4o. | 5o. | |||
Dia 2 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 | Vs3 | Vs1 | Vs2 |
1 | 5o. | 4o. | 3o. | 1o. | 2o. | |||
2 | 3o. | 5o. | 4o. | 2o. | 1o. | |||
3 | 4o. | 3o. | 5o. | 1o. | 2o. | |||
4 | 1o. | 2o. | 3o. | 5o. | 4o. | 3o. | ||
5 | 1o. | 2o. | 3o. | 5o. | 4o. | |||
6 | 5o. | 4o. | 3o. | 1o. | 2o. |
Exemplo de protocolo de teste
Este tipo de teste depende de o moderador estar bem organizado e fazer boas anotações e pode ser muito útil ter um anotador além do moderador para acompanhar as versões e a ordem
AVALIAÇÃO COMPARATIVA
Realização da Avaliação
O teste montado é muito simples, pois as tarefas e cenários a serem utilizados são idênticos tanto para o protótipo quanto ao vivo. Usaremos uma abordagem de contrapeso para garantir que qualquer tendência seja removida e que as versões ao vivo e protótipo sejam vistas primeiro e segundo um número igual de vezes.
O participante irá interagir com cada um, um após o outro, tentando a mesma tarefa e fornecendo feedback verbal mais comportamentos observados.
Os critérios com base nos quais a comparação é realizada precisam ser bem pensados e as tarefas e o protocolo de teste devem ser planejados de acordo. Os participantes nem sempre conseguem fazer o salto do protótipo para a realidade e, portanto, seu feedback pode se basear em um julgamento injusto.
Se nos tivermos preparado bem, podemos ignorar isso e nos concentrar nas áreas-chave, tais como;
- Interação
- Viagem do usuário
- Função das características
Estes serão a base para a benchmark e o formato de pontuação / relatório concordamos com você.
ESTUDO DE CASO:
Um de nossos clientes do hotel estava desenvolvendo um novo aplicativo e nos pede para realizar uma avaliação comparativa do aplicativo protótipo em desenvolvimento versus o aplicativo ao vivo existente. Usamos um contrapeso para garantir que os 6 participantes interagissem com o protótipo e o aplicativo ao vivo em uma ordem 1:2 igualmente. A entrega incluiu um benchmark detalhado dos pontos fortes e fracos comparativos do aplicativo ao vivo versus o protótipo.
Tem um projeto em mente?