Testar aplicativos móveis

Dada a grande variedade de dispositivos no mercado e dispositivos sendo lançados, testar seus aplicativos se tornou extremamente importante. Essa é uma área em que a funcionalidade e a usabilidade podem receber baixas revisões em uma loja de aplicativos, mas um único defeito pode resultar na desinstalação do aplicativo. É necessário prestar especial atenção aos seus planos de ensaio e à garantia da qualidade. O link a seguir aborda muitos dos tópicos que precisam ser abordados em geral, como identificar seu ambiente, definir casos de teste, tipos de teste, suposições, envolvimento do cliente etc. Também são discutidas ferramentas para ajudar no esforço de teste. Ferramentas internas, como Hobbes, podem ajudar com testes de interface baseados na Web. Embora o Daycan enfatize suas instâncias com uma carga simulada. Se o seu ambiente de teste já tiver experiência com ferramentas de terceiros, como o Selenium, elas também poderão ser usadas.

Ao desenvolver um aplicativo móvel, há muitas novas preocupações específicas para dispositivos que precisam ser abordados junto com os de testes tradicionais.

• Funcional - Todos os requisitos são atendidos pelo seu aplicativo?
• Usabilidade: o aplicativo é fácil de usar e entender pelo seu cliente?
• Desempenho - O que acontece durante um pico no uso? Os elementos do aplicativo, como swipes e carrosséis, são rápidos e não se afastam da experiência?
• Falha ou interrupções - O que acontece quando há uma chamada ou notificação recebida enquanto o aplicativo está em execução? O que acontece se houver uma interrupção ou desligamento da rede?
• Instalação e atualizações - Como está a experiência de instalação? Como as atualizações são enviadas?
• Técnico - Seu aplicativo consome muito energia de um dispositivo?
• Localização - Todas as áreas no seu aplicativo são traduzidas?
• Certificação - seu aplicativo foi certificado? Os clientes podem confiar que ele segue todos os requisitos legais de privacidade de dados?

Essas perguntas devem ser respondidas durante seus testes automatizados e manuais.

Teste automatizado

Deve ser realizado algum grau de teste automatizado para abranger a variedade de tamanhos de tela, restrições de memória, métodos de entrada e sistemas operacionais. Ela não só abrange grande parte dos casos de teste, como também pode acelerar o teste de regressão quando novos recursos ou dispositivos são introduzidos. Idealmente, suas ferramentas de automação devem reduzir ou limitar a duplicação de esforços. Use ferramentas ou estruturas para que seu esforço de teste seja aplicável em todas as plataformas. O gráfico a seguir mostra uma estrutura simplificada de um ambiente de teste para testes de interface de usuário com base na Web e testes de aplicativos móveis. O lado esquerdo do gráfico mostra uma série de nós do Selenium com navegadores. O SeleniumGrid pode realizar testes comuns de interface baseados na Web para qualquer um desses nós. O hub Selenium também pode se conectar ao Appum para testes de aplicativos em várias plataformas. Apenas são mostrados simuladores, mas você pode incorporar adb, para Android e utilitários Xcode para dispositivos iOS. Os links são fornecidos posteriormente neste documento, onde você pode encontrar detalhes específicos para as ferramentas mencionadas.

Teste manual

Além dos testes automatizados, o aplicativo deve passar por um ciclo de testes manuais. Os clientes que executam o aplicativo em um dispositivo real não podem ser duplicados por um script. Aqui também, você tem muitas opções. Você pode usar uma plataforma, como HóqueiApp, para definir quem tem acesso e coletar feedback. Ou você pode terceirizar todo o processo para um serviço como UTest, ElusiveStars ou Testin. Se você tiver um grupo de testadores internos, mas não tiver variação de dispositivos, há serviços em nuvem onde você pode realizar testes manuais em seu conjunto de dispositivos. Um desses serviços que fornece isso é o SauceLabs. Você também pode criar aplicativos remotamente para PhoneGap Enterprise e instalá-los em dispositivos locais como um nível de teste de aceitação ou de demonstração. Consulte o site PhoneGap para obter os recursos e a documentação mais recentes. Seja qual for a abordagem, os ensaios manuais devem ser efetuados;

• atingir um grande alvo de testadores,

• testar em relação a um grande conjunto de dispositivos (idealmente dispositivos reais, mas simuladores/emuladores, se não houver dispositivos reais disponíveis),

• fornecer comentários informativos:

  • relatórios de falhas,
  • análise/rastreamento,
  • utilização,
  • áreas de atenção,
  • desempenho,
  • consumo de energia/dados etc.

Ferramentas

Há uma grande variedade de ferramentas disponíveis para testar aplicativos móveis. As opções a serem usadas serão baseadas na sua situação específica: recursos, preço, suporte, cobertura etc. Veja a seguir apenas uma pequena descrição de algumas das ferramentas e serviços disponíveis.

Selênio

• Estrutura que inclui uma API para scripts de teste para alimentar o WebDriver e controlar vários navegadores.
• Você pode usar isso junto com o Appium para testes em dispositivos reais.
• SeleniumGrid direciona testes em nós para testes paralelos.
• O Selenium IDE ajuda a reduzir a gravação de casos de teste.

Para obter mais informações, consulte https://www.seleniumhq.org/.

Testdroid

• Um serviço de teste baseado em nuvem com ganchos de integração contínuos e teste de dispositivo real.
• Inclui um App Crawler que verifica a compatibilidade do dispositivo, analisa logs, atravessa visualizações, captura de tela e monitora o desempenho.

Para obter mais informações, consulte https://testdroid.com/.

Appium

• Appium é uma estrutura popular entre plataformas para automatização de testes móveis.
• Além disso, um inspetor é incluído com habilidades de registro para ajudar a codificar casos de teste.

Para obter mais informações, consulte https://appium.io/.

SauceLabs

• O SauceLabs fornece testes baseados em nuvem e integra-se à integração contínua.
• Os testes são executados no ambiente de nuvem automaticamente ou você pode iniciar um determinado dispositivo ou plataforma e realizar testes manuais para ajudar a depurar os problemas.

Para obter mais informações, consulte https://saucelabs.com/.

AppTestNow

• Um serviço de terceirização que testará seus aplicativos móveis.
• Inclui um grande conjunto de dispositivos e oferece uma grande variedade de tipos de teste: desempenho, qualidade, funcional, certificação, localização, consumo de dados etc.

Para obter mais informações, consulte https://www.apptestnow.com.

HóqueiApp

• O HóqueiApp se enquadra no teste manual, onde o aplicativo móvel é enviado para uma loja de aplicativos pessoal, onde os testadores podem baixar e experimentá-lo.

Para obter mais informações, consulte https://hockeyapp.net/features/.

Jenkins

• Embora não seja uma ferramenta de teste, Jenkins é uma estrutura de integração contínua que fornece a espinha dorsal para testes automatizados. Vários plug-ins de terceiros estão disponíveis para estender a funcionalidade. Por exemplo, o plug-in SeleniumGrid fornece uma interface do usuário para ajudar a gerenciar o hub e os nós do Selenium.

Para obter mais informações, consulte https://jenkins-ci.org/ e https://wiki.jenkins-ci.org/display/JENKINS/Plugins.