艰难的一天 tough-day
第2天是多么艰难 what-is-tough-day
“Touch Day 2”是一款应用程序,可让您对AEM实例的限制进行压力测试。 它可以直接与默认测试套件一起运行,也可以根据测试需要进行配置。 您可以观看此录制以演示应用程序。
如何应对艰难的第2天 how-to-run-tough-day
从Adobe存储库下载最新版本的“困难日2”。 下载应用程序后,您可以通过提供host
参数来开箱即用。 在以下示例中,AEM实例在本地运行,因此使用了localhost
值:
java -jar toughday2.jar --host=localhost
添加参数后运行的默认套件名为toughday
。 它包含以下用例:
- 为其创建页面和活动副本(包括转出)
- 获取主页
- 在querybuilder中运行查询
- 创建资源层次结构
- 删除资源
该套件包含15%的写入操作和85%的读取操作。
要运行包测试,Tough Day 2将安装其默认内容包。 通过将installsamplecontent
参数设置为false
可以避免这种情况,但请记住,您还应更改要运行的测试的默认路径。 如果jar在没有参数的情况下运行,“第2天”会显示帮助信息。
通常,您可以按照以下模式使用该应用程序:
java -jar toughday2.jar [--help | --help_full | --help_tests | --help_publish] [<global arguments> | <actions> | --runmode | --publishmode]
获取帮助 getting-help
Tough Day 2提供了多种帮助选项,可从命令行访问。 例如:
java -jar toughday2.jar --help_full
在下表中,您可以找到相关的帮助参数。
全局参数 global-parameters
Tough Day 2提供了用于设置或更改测试环境的全局参数。 这些资源包括目标主机、端口号、使用的协议、实例的用户和密码等等。 例如:
java -jar toughday2.jar --host=host --protocol=https --port=4502 --duration=30m --dryrun=true
您可以在下面的列表中找到相关参数:
--installsamplecontent=<Val>
--protocol=<Val>
--host=<Val>
--port=<Val>
--user=<Val>
--password=<Val>
--duration=<Val>
--timeout=<Val>
--suite=<Val>
--configfile=<Val>
--contextpath=<Val>
--loglevel=<Val>
--dryrun=<Val>
自定义 customizing
可通过两种方式实现自定义:命令行参数或yaml配置文件。 配置文件用于大型自定义套件,它们会覆盖“第2天”默认参数。 命令行参数会覆盖配置文件和默认参数。
保存测试配置的唯一方法是以yaml格式复制它。
添加新测试 adding-a-new-test
如果您不想使用默认toughday
套件,可以使用add
参数添加您选择的测试。 以下示例说明如何使用命令行参数或yaml配置文件添加CreateAssetTreeTest
测试。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest
通过使用yaml配置文件:
globals:
host : localhost
tests:
- add : CreateAssetTreeTest
添加同一测试的多个实例 adding-multiple-instances-of-the-same-test
您还可以添加和运行同一测试的多个实例,但每个实例必须具有唯一的名称。 以下示例说明如何使用命令行参数或yaml配置文件添加同一测试的两个实例。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest name=FirstAssetTree --add CreateAssetTreeTest name=SecondAssetTree
通过使用yaml配置文件:
globals:
host : localhost
tests:
- add : CreateAssetTreeTest
properties:
name : FirstAssetTree
- add : CreateAssetTreeTest
properties:
name : SecondAssetTree
更改测试属性 changing-the-test-properties
如果需要更改一个或多个测试属性,可将该属性添加到命令行或yaml配置文件中。 要查看所有可用的测试属性,请将--help <TestClass/PublisherClass>
参数添加到命令行中,例如:
java -jar toughday2.jar --help CreatePageTreeTest
请记住, yaml配置文件将覆盖Touch Day 2默认参数,而命令行参数将覆盖配置文件和默认值。
以下示例显示如何使用命令行参数或yaml配置文件更改CreatePageTreeTest
测试的template
属性。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --add CreatePageTreeTest template=/conf/toughday-templates/settings/wcm/templates/toughday-template
通过使用yaml配置文件:
globals:
host : localhost
tests:
- add : CreatePageTreeTest
properties:
template : /conf/toughday-templates/settings/wcm/templates/toughday-template
使用预定义的测试包 working-with-predefined-test-suites
以下示例显示如何向预定义套件添加测试,以及如何重新配置和从预定义套件中排除现有测试。
您可以使用add
参数并指定目标预定义套件向预定义套件添加新测试。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest
通过使用yaml配置文件:
globals:
host : localhost
suite : toughday
tests:
- add : CreatePageTreeTest
还可以使用config
* *参数重新配置给定套件中的现有测试。 还应指定测试套件名称和实际名称(而不是测试类名称)。 您可以在测试类的name
属性中找到测试名称。 有关如何查找测试属性的详细信息,请阅读更改测试属性部分。
在下面的示例中,CreatePageTreeTest
(名为UploadAsset
)的默认资产标题被更改为“NewAsset”。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --suite=toughday --config UploadAsset title=NewAsset
通过使用yaml配置文件:
globals:
host : localhost
suite : toughday
tests:
- config : UploadAsset
properties :
title : NewAsset
此外,您还可以使用exclude
参数从默认配置中删除预定义套件或发布者的测试。 同时指定测试套件名称和实际名称(不是测试C lass
名称)。 您可以在测试类的name
属性中找到测试名称。 在以下示例中,从toughday套件中删除了CreatePageTreeTest
(名为UploadAsset
)测试。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --suite=toughday --exclude UploadAsset
通过使用yaml配置文件:
globals:
host : localhost
suite : toughday
tests:
- exclude : UploadAsset
运行模式 run-modes
“困难第2天”可以使用以下模式之一运行: 正常 和 常量负载。
正常 运行模式有两个参数:
-
concurrency
- concurrency表示“第2天”将为测试执行创建的线程数。 在这些线程上,将执行测试,直到持续时间耗尽或没有其他要执行的测试为止。 -
waittime
— 同一线程上两次连续测试执行之间的等待时间。 该值必须以毫秒为单位表示。
以下示例说明如何使用命令行添加参数:
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest --runmode=normal concurrency=20
或者使用yaml配置文件:
runmode:
type : normal
waittime : 300
concurrency : 200
常量负载 运行模式不同于正常运行模式,它生成了常量已启动测试执行次数,而不是常量线程数。 可以使用同名的运行模式参数来设置载荷。
测试选择 test-selection
两种运行模式的测试选择过程相同,如下所示:所有测试都具有weight
属性,该属性确定线程中执行的可能性。 例如,如果您有两个测试,一个权重为5,另一个权重为10,则后者比前者执行的可能性高两倍。
此外,测试可以具有count
属性,该属性将执行数量限制为给定数字。 通过此数字后,将不会再执行测试。 所有已运行的测试实例都将按配置完成运行。 以下示例说明如何在命令行或使用yaml配置文件添加这些参数。
java -jar toughday2.jar --host=localhost --add CreateAssetTreeTest weight=5 --add CreatePageTreeTest weight=10 count=100 --runmode=normal concurrency=20
或
- add : CreateAssetTreeTest
properties :
name : UploadAsset
weight : 5
base : 3
foldertitle : IAmAFolder
assettitle : IAmAnAsset
count : 100
count
参数中配置的数量完全相同。 期望偏差与正在运行的线程数成比例(由concurrency parameter
控制)。试运行 dry-run
试运行将解析所有给定的输入(命令行参数或配置文件),将其与默认值合并,然后输出结果。 它不会执行任何测试。
java -jar toughday2.jar --host=localhost --suite=toughday --add CreatePageTreeTest --dryrun=true
输出 output
“第2天”比较困难,会输出测试指标和日志。 有关详细信息,请阅读以下部分。
测试指标 test-metrics
“第2天非常艰难”当前报告了9个您可以评估的测试指标。 只有在成功运行后才会报告具有 * 符号的量度:
这些量度是在发布者的帮助下编写的,发布者可以使用add
参数添加(与添加测试类似)。 目前,有两个选项:
- CSVPublisher — 输出为CSV文件。
- ConsolePublisher — 控制台中显示输出。
默认情况下,这两个发布者均处于启用状态。
此外,还有两种报告量度的模式:
- 简单 发布模式 — 报告从执行开始到发布时的结果。
- 间隔 发布模式 — 报告给定时间范围内的结果。 可以使用 interval 发布模式参数设置时间范围。
以下示例说明如何在命令行或使用yaml配置文件配置intervals
参数。
通过使用命令行参数:
java -jar toughday2.jar --host=localhost --add CreatePageTreeTest --publishmode type=intervals interval=10s
通过使用yaml配置文件:
publishmode:
type : intervals
interval : 10s
tests:
-add : CreatePageTreeTest
日志记录 logging
“Tough Day 2”会在您运行“Tough Day 2”的同一目录中创建一个日志文件夹。 此文件夹包含两种类型的日志:
- toughday.log:包含与应用程序状态、调试信息和全局消息相关的消息。
- toughday_<testname>.log:与指定测试相关的消息。
不会覆盖日志,后续运行会将消息附加到现有日志。 日志具有多个级别,有关详细信息,请参阅loglevel参数。。