Dia difícil
CAUTIONO que é o Dia difícil 2
O Dia 2 difícil é um aplicativo que permite testar os limites da sua instância do AEM. Ele pode ser executado imediatamente com o conjunto de teste padrão ou pode ser configurado para atender às suas necessidades de teste. Você pode assistir esta gravação para apresentação do pedido.
Como executar o Dia 2 difícil
Baixe a versão mais recente do Tough Day 2 (Dia 2 difícil) Repositório Adobe. Depois de baixar o aplicativo, você pode executá-lo imediatamente fornecendo o host parâmetro. No exemplo a seguir, a instância do AEM é executada localmente para que a variável localhost é usado:
java -jar toughday2.jar --host=localhost
O conjunto padrão que é executado depois de adicionar os parâmetros é nomeado toughday. Ele contém os seguintes casos de uso:
- Criar páginas e cópias ao vivo para elas (incluindo implantações)
- Obter página inicial
- Executar consultas no querybuilder
- Criar hierarquias de ativos
- Excluir ativos
O conjunto contém 15% de ações de gravação e 85% de ações de leitura.
Para executar os testes do conjunto, o Dia 2 difícil instalará seu pacote de conteúdo padrão. Isso pode ser evitado ao definir a variável installsamplecontent para false, mas lembre-se de que você também deve alterar os caminhos padrão dos testes que pretende executar. Se o jar for executado sem parâmetros, o Dia 2 difícil exibirá a variável informações de ajuda.
Como regra geral, você pode usar o aplicativo seguindo este padrão:
java -jar toughday2.jar [--help | --help_full | --help_tests | --help_publish] [<global arguments> | <actions> | --runmode | --publishmode]
NOTEObter ajuda
Embora o Dia 2 ofereça uma ampla variedade de opções de ajuda que podem ser acessadas a partir da linha de comando. Por exemplo:
java -jar toughday2.jar --help_full
Na tabela abaixo, você pode encontrar os parâmetros de ajuda relevantes.
Parâmetros globais
O Dia 2 difícil oferece parâmetros globais que definem ou alteram o ambiente para os testes. Isso inclui o host que é direcionado, o número da porta, o protocolo usado, o usuário e a senha da instância e muito mais. Por exemplo:
java -jar toughday2.jar --host=host --protocol=https --port=4502 --duration=30m --dryrun=true
Você pode encontrar os parâmetros relevantes na lista abaixo:
| Parâmetro | Descrição | Valor padrão | Valores possíveis |
|---|---|---|---|
--installsamplecontent=<Val> | Instala ou ignora o pacote de conteúdo padrão Tough Day 2. | verdadeiro | verdadeiro ou falso |
--protocol=<Val> | O protocolo usado para o host. | http | http ou https |
--host=<Val> | O nome do host ou IP que será direcionado. | ||
--port=<Val> | A porta do host. | 4502 | |
--user=<Val> | O nome de usuário da instância. | admin | |
--password=<Val> | Senha para o usuário em questão. | admin | |
--duration=<Val> | A duração dos testes. Pode ser expresso em (s)segundos, (m), (h)e (d). | 1d | |
--timeout=<Val> | Por quanto tempo um teste será executado antes de ser interrompido e marcado como defeituoso. Expressa em segundos. | 180 | |
--suite=<Val> | O valor pode ser uma lista ou uma lista (separada por vírgulas) de conjuntos de testes predefinidos. | dilema | |
--configfile=<Val> | O arquivo de configuração de código direcionado. | ||
--contextpath=<Val> | Caminho de contexto da instância. | ||
--loglevel=<Val> | O nível de log do mecanismo do Dia 2 Difícil. | INFO | TUDO, DEPURAR, INFORMAÇÕES, AVISO, ERRO, FATAL, DESLIGADO |
--dryrun=<Val> | Se verdadeiro, imprime a configuração resultante e não executa testes. | falso | verdadeiro ou falso |
Personalização
A personalização pode ser alcançada de duas formas: parâmetros de linha de comando ou arquivos de configuração de yaml. Os arquivos de configuração geralmente são usados para conjuntos personalizados grandes e substituirão os parâmetros padrão do Dia difícil 2 . Os parâmetros da linha de comando substituem os arquivos de configuração e os parâmetros padrão.
A única maneira de salvar uma configuração de teste é copiá-la em formato de email. Para obter mais detalhes, consulte esta seção toughday.yaml e os exemplos de configuração de código nas seções abaixo.
Adicionar um novo teste
Se você não quiser usar o padrão toughday você pode adicionar um teste de sua escolha usando o add parâmetro. Os exemplos abaixo mostram como adicionar a variável CreateAssetTreeTest teste usando parâmetros de linha de comando ou um arquivo de configuração de código.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
tests:
- add : CreateAssetTreeTest
Adicionar várias instâncias do mesmo teste
Você também pode adicionar e executar várias instâncias do mesmo teste, mas cada instância deve ter um nome exclusivo. Os exemplos abaixo mostram como adicionar duas instâncias do mesmo teste usando parâmetros de linha de comando ou um arquivo de configuração de exemplo.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest name=FirstAssetTree --add CreateAssetTreeTest name=SecondAssetTree
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
tests:
- add : CreateAssetTreeTest
properties:
name : FirstAssetTree
- add : CreateAssetTreeTest
properties:
name : SecondAssetTree
Alterar as propriedades do teste
Caso precise alterar uma ou mais propriedades de teste, é possível adicionar essa propriedade à linha de comando ou ao arquivo de configuração de código. Para ver todas as propriedades de teste disponíveis, adicione o --help <TestClass/PublisherClass> para a linha de comando, por exemplo:
java -jar toughday2.jar --help CreatePageTreeTest
Lembre-se de que os arquivos de configuração do yaml substituirão os parâmetros padrão Tough Day 2 e os parâmetros de linha de comando substituirão os arquivos de configuração e os padrões.
Os exemplos abaixo mostram como alterar a variável template para a CreatePageTreeTest teste usando parâmetros de linha de comando ou um arquivo de configuração de código.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --add CreatePageTreeTest template=/conf/toughday-templates/settings/wcm/templates/toughday-template
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
tests:
- add : CreatePageTreeTest
properties:
template : /conf/toughday-templates/settings/wcm/templates/toughday-template
Trabalhar com conjuntos de testes predefinidos
Os exemplos abaixo mostram como adicionar um teste a um conjunto predefinido e como reconfigurar e excluir um teste existente de um conjunto predefinido.
Você pode adicionar um novo teste a um conjunto predefinido usando o add e especificar o conjunto predefinido direcionado.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
suite : toughday
tests:
- add : CreatePageTreeTest
Os testes existentes em um determinado conjunto também podem ser reconfigurados usando o config* *parâmetro. Observe que você também deve especificar o nome do conjunto e o nome real do teste (não o nome da Classe de teste). Você pode encontrar o nome do teste no name propriedade da Classe de Teste. Para obter mais detalhes sobre como encontrar propriedades de teste, leia o Alterar propriedades do teste seção.
No exemplo abaixo do título do ativo padrão para a variável CreatePageTreeTest (nome UploadAsset) é alterada para "NewAsset".
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --suite=toughday --config UploadAsset title=NewAsset
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
suite : toughday
tests:
- config : UploadAsset
properties :
title : NewAsset
Além disso, também é possível remover testes de conjuntos ou editores predefinidos da configuração padrão com o uso da variável exclude parâmetro. Observe que você também deve especificar o nome do conjunto e o nome real do teste (não o teste C lass name). Você pode encontrar o nome do teste no name propriedade da classe de teste. No exemplo abaixo, a variável CreatePageTreeTest (nome UploadAsset) é removido do conjunto de dias de duração.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --suite=toughday --exclude UploadAsset
Usando um arquivo de configuração de exemplo:
globals:
host : localhost
suite : toughday
tests:
- exclude : UploadAsset
Modos de execução
Embora o Dia 2 possa ser executado em um dos seguintes modos: normal e carga constante.
O normal o modo de execução tem dois parâmetros:
-
concurrency- simultaneidade representa o número de threads que o Dia 2 difícil criará para execução de teste. Nesses threads, os testes serão executados até que a duração tenha terminado ou não haja mais testes para executar. -
waittime- o tempo de espera entre duas execuções consecutivas de teste no mesmo thread. O valor deve ser expresso em milissegundos.
O exemplo abaixo mostra como adicionar os parâmetros usando a linha de comando:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest --runmode=normal concurrency=20
ou usando um arquivo de configuração de código:
runmode:
type : normal
waittime : 300
concurrency : 200
O carga constante o modo de execução difere do modo de execução normal, gerando um número constante de execuções de teste iniciadas, em vez de um número constante de threads. Você pode definir a carga usando o parâmetro run mode com o mesmo nome.
Seleção de teste
O processo de seleção de teste é o mesmo para ambos os modos de execução e é assim: todos os testes têm uma weight , que determina a probabilidade de execução em um thread. Por exemplo, se tivermos dois testes, um com peso de 5 e outro com peso de 10, o segundo terá duas vezes mais probabilidade de ser executado do que o primeiro.
Além disso, os testes podem ter uma count , que limita o número de execuções a um determinado número. Após esse número ser aprovado, nenhuma outra execução do teste ocorrerá. Todas as instâncias de teste que já estão em execução concluirão a execução como configuradas. O exemplo a seguir mostra como adicionar esses parâmetros na linha de comando ou usando um arquivo de configuração de código.
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest weight=5 --add CreatePageTreeTest weight=10 count=100 --runmode=normal concurrency=20
ou
- add : CreateAssetTreeTest
properties :
name : UploadAsset
weight : 5
base : 3
foldertitle : IAmAFolder
assettitle : IAmAnAsset
count : 100
count parâmetro. Espere um desvio proporcional ao número de threads em execução (controlado pela variável concurrency parameter).Execução de prática
Uma execução seca analisa todas as entradas fornecidas (parâmetros da linha de comando ou arquivos de configuração), mesclando-as com os padrões e, em seguida, gera os resultados. Ele não executa nenhum dos testes.
java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest --dryrun=true
Saída
O Dia 2 difícil gera métricas de teste e registros. Para obter mais detalhes, leia as seções a seguir.
Testar métricas
O Dia 2 difícil atualmente relata 9 métricas de teste que você pode avaliar. Métricas com a * são reportados somente após execuções bem-sucedidas:
| Nome | Descrição |
|---|---|
| Carimbo de data e hora | Carimbo de data e hora da última execução de teste concluída. |
| Aprovado | Número de execuções bem-sucedidas. |
| Falhou | Número de execuções com falha. |
| Min* | Duração mais baixa da execução do teste. |
| &Último; | Maior duração de execução de teste. |
| Median* | Duração mediana calculada de todas as execuções de teste. |
| Média &anterior; | Duração média calculada de todas as execuções de teste. |
| StdDev* | O desvio padrão. |
| 90p* | 90 percentil. |
| 99p* | 99 percentil. |
| 99,9p* | Percentil 99,9. |
| Taxa de transferência real &anterior; | Número de execuções dividido pelo tempo de execução decorrido. |
Essas métricas são gravadas com a ajuda de editores que podem ser adicionados com a variável add (de forma semelhante à adição de testes). Atualmente, há duas opções:
- CSVPublisher - a saída é um arquivo CSV.
- ConsolePublisher - a saída é exibida no console.
Por padrão, ambos os editores estão ativados.
Além disso, há dois modos nos quais as métricas são relatadas:
- O simples modo de publicação - relata os resultados do início da execução até o ponto de publicação.
- O intervalos modo de publicação - relata os resultados em um determinado período. Você pode definir o período com a variável intervalo parâmetro do modo de publicação.
O exemplo a seguir mostra como configurar o intervals na linha de comando ou usando um arquivo de configuração de código.
Usando parâmetros de linha de comando:
java -jar toughday2.jar --host=localhost --add CreatePageTreeTest --publishmode type=intervals interval=10s
Usando um arquivo de configuração de exemplo:
publishmode:
type : intervals
interval : 10s
tests:
-add : CreatePageTreeTest
Logs
O Dia 2 difícil cria uma pasta de logs no mesmo diretório em que você executou o Dia 2 difícil. Esta pasta contém dois tipos de logs:
- toughday.log: contém mensagens relacionadas ao estado do aplicativo, informações de depuração e mensagens globais.
- toughday_<testname>.log: mensagens relacionadas ao teste especificado.
Os logs não são substituídos, as execuções subsequentes anexarão mensagens aos logs existentes. Os logs têm vários níveis. Para obter mais informações, consulte a [loglevel parameter](/docs/experience-manager-64/developing/testing/tough-day.md#global-parameters).
