Um conjunto de testes é uma coleta de
etapas de teste que foram agrupadas para propósitos de execução de teste. Conjuntos de testes podem incluir testes manuais e automatizados, mas eles são mais benéficos quando você possui uma série de testes
automatizados que deseja executar sem supervisão. Ao executar um conjunto, é possível especificar se serão executados casos de teste no conjunto sequencialmente ou em paralelo. O cenário a seguir apresenta um fluxo de trabalho possível para a execução do conjunto de testes.
Figura 1. Diagrama do Fluxo de Trabalho para a Execução do Conjunto de Testes
- Crie etapas de teste.
- Opcional: Crie scripts de teste e associe-os aos casos de teste.
Nota: Os casos de teste são necessários para execução do conjunto de testes, mas cada caso de teste não precisa ter um script de teste associado.
- Opcional: Inclua as etapas de teste em um plano de teste.
Um plano de teste ajuda a organizar as atividades de execução de teste, mas ele não é um requisito para uma execução de teste. Ao incluir as etapas de teste e os conjuntos de testes em um plano, é possível planejar a execução do conjunto como parte das atividades de teste para o plano. Os registros de execução do conjunto de testes são executados no contexto do plano de teste e nas iterações de plano de teste. Além disso, todos os resultados da execução do conjunto de testes (incluindo resultados da execução de caso de teste)
são associados ao plano de teste. Todos os relatórios que você executar com relação a esses resultados incluirão as informações do plano de teste associado.
- Analise as etapas de teste e os scripts de teste existentes no seu ambiente para determinar quais deles farão parte do novo conjunto de testes.
De modo ideal, cada etapa de teste em um conjunto representa uma parte de um cenário, como os elementos que simulam o usuário concluindo uma transação. Por exemplo, um conjunto de testes poderia conter quatro etapas de teste, cada uma com um script de teste associado separado:
- Etapa de teste 1: Efetuar login
- Etapa de teste 2: Selecionar uma organização
- Etapa de teste 3: Alocar dividendos
- Etapa de teste 4: Efetuar logout
- Crie um novo conjunto de testes.
- Opcional: Inclua o conjunto de testes em um plano de teste.
Conforme mencionado na etapa 3, um plano de teste não é um requisito para uma execução de conjunto de testes, mas ele pode ajudar a organizar as atividades de teste. Se você incluir o conjunto de testes em um plano de teste, certifique-se de que as etapas de teste incluídas no conjunto de testes também façam parte do mesmo plano.
- Inclua as etapas de teste existentes no conjunto de testes.
Observe que a ordem das etapas de teste na seção Etapa de Teste de um conjunto de testes determina a ordem na qual elas são executadas em uma execução de conjunto de testes sequencial.
Quando você inclui casos de teste a um conjunto de testes, pode, opcionalmente, designar proprietários para cada caso de teste no conjunto. Ao executar um conjunto de testes que possui proprietários designados para casos de teste, a página de execução do conjunto de testes mostrará o proprietário de cada caso de teste no conjunto. Os testadores podem filtrar no campo de proprietário para ver os casos de teste no conjunto de testes que devem executar.
- Crie um único registro de execução de conjunto de testes para o conjunto de testes ou gere diversos registros de execução de conjunto de testes para o conjunto de testes, automaticamente.
- Opcional: Especifique um ambiente para o conjunto ser executado.
Se você deseja que o conjunto teste apenas um ambiente, especifique o ambiente de teste no nível do registro de execução do conjunto de testes. Se deseja testar um ambiente misto, você deve especificar ambientes de teste nas etapas de teste individuais e não no registro de execução do conjunto de testes.
Basicamente, o ambiente no registro de execução de conjunto de testes é a especificação padrão, a menos que ele seja substituído no nível da etapa de teste.
- Execute o conjunto de testes. O conjunto de testes pode ser executado das seguintes maneiras:
- Na seção Registros de Execuções do Conjunto de Testes de um conjunto de testes, selecione um registro de execução de conjunto de testes existente e clique no ícone Executar.
- Abra um conjunto de testes e clique no ícone Executar na parte superior do conjunto de testes. Selecione um registro de execução de conjunto de testes ou especifique que um novo deve ser criado.
- Na caixa de diálogo Executar Conjunto de Testes, especifique as configurações de execução:
- Executar este conjunto em paralelo: Ao executar seu conjunto de testes, é possível executar todas as etapas de teste ao mesmo tempo (modo paralelo), ou executá-las uma após a outra (modo sequencial). Neste fluxo de trabalho, nossas etapas de teste representam uma sequência de atividades (você deve efetuar login antes que seja possível selecionar uma organização, por exemplo). Para executar esse teste corretamente, limpe a caixa de seleção Executar este conjunto em paralelo para selecionar o modo sequencial. Algumas vezes você pode desejar executar todas as suas etapas de teste de uma única vez. Por exemplo, se os scripts não dependerem entre si e não for necessário executá-los em uma ordem particular. Neste caso, seria possível escolher o modo paralelo.
- Parar a execução do conjunto se algum teste não for aprovado: Na execução sequencial do conjunto de testes, é possível parar o conjunto de testes se uma das etapas de teste não for aprovada. Por exemplo, se o teste para efetuar login no aplicativo falhar ou for bloqueado, a execução do conjunto de testes será interrompida antes de continuar com o teste para selecionar uma organização.
- Criar Resultado sem Execução: Use essa opção para registrar resultados para o conjunto de testes sem executar os scripts de teste.
Opcionalmente, você pode escolher casos de teste para excluir da execução do conjunto de testes:
- Visualize os resultados de execução de conjunto de testes e envie os defeitos, conforme necessário.
- Atualize os resultados da execução do conjunto de testes, conforme necessário, e salve os resultados.