Dia difícil tough-day

CAUTION
AEM 6.4 chegou ao fim do suporte estendido e esta documentação não é mais atualizada. Para obter mais detalhes, consulte nossa períodos de assistência técnica. Encontre as versões compatíveis here.

O que é o Dia difícil 2 what-is-tough-day

O Dia 2 difícil é um aplicativo que permite testar os limites da sua instância do AEM. Ele pode ser executado imediatamente com o conjunto de teste padrão ou pode ser configurado para atender às suas necessidades de teste. Você pode assistir esta gravação para apresentação do pedido.

Como executar o Dia 2 difícil how-to-run-tough-day

Baixe a versão mais recente do Tough Day 2 (Dia 2 difícil) Repositório Adobe. Depois de baixar o aplicativo, você pode executá-lo imediatamente fornecendo o host parâmetro. No exemplo a seguir, a instância do AEM é executada localmente para que a variável localhost é usado:

java -jar toughday2.jar --host=localhost

O conjunto padrão que é executado depois de adicionar os parâmetros é nomeado toughday. Ele contém os seguintes casos de uso:

  • Criar páginas e cópias ao vivo para elas (incluindo implantações)
  • Obter página inicial
  • Executar consultas no querybuilder
  • Criar hierarquias de ativos
  • Excluir ativos

O conjunto contém 15% de ações de gravação e 85% de ações de leitura.

Para executar os testes do conjunto, o Dia 2 difícil instalará seu pacote de conteúdo padrão. Isso pode ser evitado ao definir a variável installsamplecontent para false, mas lembre-se de que você também deve alterar os caminhos padrão dos testes que pretende executar. Se o jar for executado sem parâmetros, o Dia 2 difícil exibirá a variável informações de ajuda.

Como regra geral, você pode usar o aplicativo seguindo este padrão:

java -jar toughday2.jar [--help | --help_full | --help_tests | --help_publish]  [<global arguments> | <actions> | --runmode | --publishmode]
NOTE
Embora o Dia 2 não tenha um passo de limpeza. Como resultado, é recomendável executar o Dia 2 difícil em uma instância de preparo clonada e não na instância de produção principal. A instância de preparo deve ser removida após os testes.

Obter ajuda getting-help

Embora o Dia 2 ofereça uma ampla variedade de opções de ajuda que podem ser acessadas a partir da linha de comando. Por exemplo:

java -jar toughday2.jar --help_full

Na tabela abaixo, você pode encontrar os parâmetros de ajuda relevantes.

Parâmetro
Descrição
Exemplo
--ajuda
Imprime informações globais, por exemplo: as ações disponíveis, conjuntos predefinidos, modos de execução e parâmetros globais.
—help_publish
Imprime todos os editores disponíveis.
—help_testing
Imprime as classes de teste e sua descrição.
—help_full
Imprime tudo acima, além de testes, editores e componentes do conjunto.
—help —runmode/publishmode type=<mode>
Lista informações sobre o modo de execução ou publicação especificado.

java -jar toughday2.jar —help —runmode type=constantload

java -jar toughday2.jar —help —publishmode type=intervalos

—help —suite=<suitename>
Lista todos os testes de um determinado conjunto e suas respectivas propriedades configuráveis.
java -jar toughday2.jar —help —suite=get_tests
—help —tag=<tag>
Lista todos os itens que têm a tag especificada.
java -jar toughday2.jar —help —tag=publish
—ajuda <testclass publisherclass="">
Lista todas as propriedades configuráveis para o teste ou editor em questão.

java -jar toughday2.jar —help UploadPDFTest

java -jar toughday2.jar —help CSVPublisher

Parâmetros globais global-parameters

O Dia 2 difícil oferece parâmetros globais que definem ou alteram o ambiente para os testes. Isso inclui o host que é direcionado, o número da porta, o protocolo usado, o usuário e a senha da instância e muito mais. Por exemplo:

java -jar toughday2.jar --host=host --protocol=https --port=4502 --duration=30m --dryrun=true

Você pode encontrar os parâmetros relevantes na lista abaixo:

Parâmetro
Descrição
Valor padrão
Valores possíveis
--installsamplecontent=<Val>
Instala ou ignora o pacote de conteúdo padrão Tough Day 2.
verdadeiro
verdadeiro ou falso
--protocol=<Val>
O protocolo usado para o host.
http
http ou https
--host=<Val>
O nome do host ou IP que será direcionado.
--port=<Val>
A porta do host.
4502
--user=<Val>
O nome de usuário da instância.
admin
--password=<Val>
Senha para o usuário em questão.
admin
--duration=<Val>
A duração dos testes. Pode ser expresso em (s)segundos, (m), (h)e (d).
1d
--timeout=<Val>
Por quanto tempo um teste será executado antes de ser interrompido e marcado como defeituoso. Expressa em segundos.
180
--suite=<Val>
O valor pode ser uma lista ou uma lista (separada por vírgulas) de conjuntos de testes predefinidos.
dilema
--configfile=<Val>
O arquivo de configuração de código direcionado.
--contextpath=<Val>
Caminho de contexto da instância.
--loglevel=<Val>
O nível de log do mecanismo do Dia 2 Difícil.
INFO
TUDO, DEPURAR, INFORMAÇÕES, AVISO, ERRO, FATAL, DESLIGADO
--dryrun=<Val>
Se verdadeiro, imprime a configuração resultante e não executa testes.
falso
verdadeiro ou falso

Personalização customizing

A personalização pode ser alcançada de duas formas: parâmetros de linha de comando ou arquivos de configuração de yaml. Os arquivos de configuração geralmente são usados para conjuntos personalizados grandes e substituirão os parâmetros padrão do Dia difícil 2 . Os parâmetros da linha de comando substituem os arquivos de configuração e os parâmetros padrão.

A única maneira de salvar uma configuração de teste é copiá-la em formato de email. Para obter mais detalhes, consulte esta seção toughday.yaml e os exemplos de configuração de código nas seções abaixo.

Adicionar um novo teste adding-a-new-test

Se você não quiser usar o padrão toughday você pode adicionar um teste de sua escolha usando o add parâmetro. Os exemplos abaixo mostram como adicionar a variável CreateAssetTreeTest teste usando parâmetros de linha de comando ou um arquivo de configuração de código.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
tests:
  - add : CreateAssetTreeTest

Adicionar várias instâncias do mesmo teste adding-multiple-instances-of-the-same-test

Você também pode adicionar e executar várias instâncias do mesmo teste, mas cada instância deve ter um nome exclusivo. Os exemplos abaixo mostram como adicionar duas instâncias do mesmo teste usando parâmetros de linha de comando ou um arquivo de configuração de exemplo.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest name=FirstAssetTree --add CreateAssetTreeTest name=SecondAssetTree

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
tests:
  - add : CreateAssetTreeTest
    properties:
      name : FirstAssetTree
  - add : CreateAssetTreeTest
    properties:
      name : SecondAssetTree

Alterar as propriedades do teste changing-the-test-properties

Caso precise alterar uma ou mais propriedades de teste, é possível adicionar essa propriedade à linha de comando ou ao arquivo de configuração de código. Para ver todas as propriedades de teste disponíveis, adicione o --help <TestClass/PublisherClass> para a linha de comando, por exemplo:

java -jar toughday2.jar --help CreatePageTreeTest

Lembre-se de que os arquivos de configuração do yaml substituirão os parâmetros padrão Tough Day 2 e os parâmetros de linha de comando substituirão os arquivos de configuração e os padrões.

Os exemplos abaixo mostram como alterar a variável template para a CreatePageTreeTest teste usando parâmetros de linha de comando ou um arquivo de configuração de código.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --add CreatePageTreeTest template=/conf/toughday-templates/settings/wcm/templates/toughday-template

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
tests:
  - add : CreatePageTreeTest
    properties:
      template : /conf/toughday-templates/settings/wcm/templates/toughday-template

Trabalhar com conjuntos de testes predefinidos working-with-predefined-test-suites

Os exemplos abaixo mostram como adicionar um teste a um conjunto predefinido e como reconfigurar e excluir um teste existente de um conjunto predefinido.

Você pode adicionar um novo teste a um conjunto predefinido usando o add e especificar o conjunto predefinido direcionado.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
  suite : toughday
tests:
  - add : CreatePageTreeTest

Os testes existentes em um determinado conjunto também podem ser reconfigurados usando o config* *parâmetro. Observe que você também deve especificar o nome do conjunto e o nome real do teste (não o nome da Classe de teste). Você pode encontrar o nome do teste no name propriedade da Classe de Teste. Para obter mais detalhes sobre como encontrar propriedades de teste, leia o Alterar propriedades do teste seção.

No exemplo abaixo do título do ativo padrão para a variável CreatePageTreeTest (nome UploadAsset) é alterada para "NewAsset".

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --suite=toughday --config UploadAsset title=NewAsset

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
  suite : toughday
tests:
  - config : UploadAsset
    properties :
      title : NewAsset

Além disso, também é possível remover testes de conjuntos ou editores predefinidos da configuração padrão com o uso da variável exclude parâmetro. Observe que você também deve especificar o nome do conjunto e o nome real do teste (não o teste C lass name). Você pode encontrar o nome do teste no name propriedade da classe de teste. No exemplo abaixo, a variável CreatePageTreeTest (nome UploadAsset) é removido do conjunto de dias de duração.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --suite=toughday --exclude UploadAsset

Usando um arquivo de configuração de exemplo:

globals:
  host : localhost
  suite : toughday
tests:
  - exclude : UploadAsset

Modos de execução run-modes

Embora o Dia 2 possa ser executado em um dos seguintes modos: normal e carga constante.

O normal o modo de execução tem dois parâmetros:

  • concurrency - simultaneidade representa o número de threads que o Dia 2 difícil criará para execução de teste. Nesses threads, os testes serão executados até que a duração tenha terminado ou não haja mais testes para executar.

  • waittime - o tempo de espera entre duas execuções consecutivas de teste no mesmo thread. O valor deve ser expresso em milissegundos.

O exemplo abaixo mostra como adicionar os parâmetros usando a linha de comando:

java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest --runmode=normal concurrency=20

ou usando um arquivo de configuração de código:

runmode:
  type : normal
  waittime : 300
  concurrency : 200

O carga constante o modo de execução difere do modo de execução normal, gerando um número constante de execuções de teste iniciadas, em vez de um número constante de threads. Você pode definir a carga usando o parâmetro run mode com o mesmo nome.

Seleção de teste test-selection

O processo de seleção de teste é o mesmo para ambos os modos de execução e é assim: todos os testes têm uma weight , que determina a probabilidade de execução em um thread. Por exemplo, se tivermos dois testes, um com peso de 5 e outro com peso de 10, o segundo terá duas vezes mais probabilidade de ser executado do que o primeiro.

Além disso, os testes podem ter uma count , que limita o número de execuções a um determinado número. Após esse número ser aprovado, nenhuma outra execução do teste ocorrerá. Todas as instâncias de teste que já estão em execução concluirão a execução como configuradas. O exemplo a seguir mostra como adicionar esses parâmetros na linha de comando ou usando um arquivo de configuração de código.

java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest weight=5 --add CreatePageTreeTest weight=10 count=100 --runmode=normal concurrency=20

ou

- add : CreateAssetTreeTest
    properties :
      name : UploadAsset
      weight : 5
      base : 3
      foldertitle : IAmAFolder
      assettitle : IAmAnAsset
      count : 100
NOTE
Devido a execuções paralelas, o número real de execuções de teste não será exatamente o valor configurado no count parâmetro. Espere um desvio proporcional ao número de threads em execução (controlado pela variável concurrency parameter).

Execução de prática dry-run

Uma execução seca analisa todas as entradas fornecidas (parâmetros da linha de comando ou arquivos de configuração), mesclando-as com os padrões e, em seguida, gera os resultados. Ele não executa nenhum dos testes.

java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest --dryrun=true

Saída output

O Dia 2 difícil gera métricas de teste e registros. Para obter mais detalhes, leia as seções a seguir.

Testar métricas test-metrics

O Dia 2 difícil atualmente relata 9 métricas de teste que você pode avaliar. Métricas com a * são reportados somente após execuções bem-sucedidas:

Nome
Descrição
Carimbo de data e hora
Carimbo de data e hora da última execução de teste concluída.
Aprovado
Número de execuções bem-sucedidas.
Falhou
Número de execuções com falha.
Min*
Duração mais baixa da execução do teste.
&Último;
Maior duração de execução de teste.
Median*
Duração mediana calculada de todas as execuções de teste.
Média &anterior;
Duração média calculada de todas as execuções de teste.
StdDev*
O desvio padrão.
90p*
90 percentil.
99p*
99 percentil.
99,9p*
Percentil 99,9.
Taxa de transferência real &anterior;
Número de execuções dividido pelo tempo de execução decorrido.

Essas métricas são gravadas com a ajuda de editores que podem ser adicionados com a variável add (de forma semelhante à adição de testes). Atualmente, há duas opções:

  • CSVPublisher - a saída é um arquivo CSV.
  • ConsolePublisher - a saída é exibida no console.

Por padrão, ambos os editores estão ativados.

Além disso, há dois modos nos quais as métricas são relatadas:

  • O simples modo de publicação - relata os resultados do início da execução até o ponto de publicação.
  • O intervalos modo de publicação - relata os resultados em um determinado período. Você pode definir o período com a variável intervalo parâmetro do modo de publicação.

O exemplo a seguir mostra como configurar o intervals na linha de comando ou usando um arquivo de configuração de código.

Usando parâmetros de linha de comando:

java -jar toughday2.jar --host=localhost --add CreatePageTreeTest --publishmode type=intervals interval=10s

Usando um arquivo de configuração de exemplo:

publishmode:
     type : intervals
     interval : 10s
     tests:
        -add : CreatePageTreeTest

Logs logging

O Dia 2 difícil cria uma pasta de logs no mesmo diretório em que você executou o Dia 2 difícil. Esta pasta contém dois tipos de logs:

  • toughday.log: contém mensagens relacionadas ao estado do aplicativo, informações de depuração e mensagens globais.
  • toughday_<testname>.log: mensagens relacionadas ao teste especificado.

Os logs não são substituídos, as execuções subsequentes anexarão mensagens aos logs existentes. Os logs têm vários níveis. Para obter mais informações, consulte a [loglevel parameter](/docs/experience-manager-64/developing/testing/tough-day.md#global-parameters).

recommendation-more-help
2315f3f5-cb4a-4530-9999-30c8319c520e