IDT 상태 머신 구성 - AWS IoT Greengrass

AWS IoT Greengrass Version 1 2023년 6월 30일에 수명 연장 단계에 들어갔습니다. AWS IoT Greengrass V1 관리형 정책에 대한 자세한 정보는 섹션을 참조하세요. 이 날짜 이후에는 기능, 개선 사항, 버그 수정 또는 보안 패치를 제공하는 업데이트가 AWS IoT Greengrass V1 릴리스되지 않습니다. 에서 실행되는 기기는 AWS IoT Greengrass V1 중단되지 않으며 계속 작동하고 클라우드에 연결됩니다. 새로운 기능이 크게 추가되고 추가 플랫폼에 대한 지원이 추가되는 으로 마이그레이션하는 AWS IoT Greengrass Version 2 것이 좋습니다.

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

IDT 상태 머신 구성

상태 머신은 테스트 제품군 실행 흐름을 제어하는 구조입니다. 테스트 도구 모음의 시작 상태를 결정하고, 사용자 정의 규칙을 기반으로 상태 전환을 관리하며, 최종 상태에 도달할 때까지 해당 상태를 계속 전환합니다.

테스트 제품군에 사용자 정의 상태 머신이 포함되지 않은 경우 IDT가 상태 머신을 자동으로 생성합니다. 기본 상태 머신은 다음 기능을 수행합니다.

  • 테스트 실행기에 전체 테스트 제품군 대신 특정 테스트 그룹을 선택하고 실행할 수 있는 기능을 제공합니다.

  • 특정 테스트 그룹을 선택하지 않은 경우, 테스트 제품군의 모든 테스트 그룹을 무작위 순서로 실행합니다.

  • 보고서를 생성하고 각 테스트 그룹 및 테스트 사례의 테스트 결과를 보여주는 콘솔 요약을 인쇄합니다.

IDT 테스트 제품군의 상태 머신은 다음 기준을 충족해야 합니다.

  • 각 상태는 테스트 그룹 실행 또는 보고서 파일 생성과 같이 IDT가 취할 수 있는 작업에 해당합니다.

  • 상태로 전환하면 상태와 관련된 작업이 실행됩니다.

  • 각 상태는 다음 상태의 전환 규칙을 정의합니다.

  • 종료 상태는 Succeed 또는 Fail 중 하나여야 합니다.

상태 머신 형식

다음 템플릿을 사용하여 <custom-test-suite-folder>/suite/state_machine.json 파일을 직접 구성할 수 있습니다.

{ "Comment": "<description>", "StartAt": "<state-name>", "States": { "<state-name>": { "Type": "<state-type>", // Additional state configuration } // Required states "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Comment

상태 머신의 설명입니다.

StartAt

IDT가 테스트 제품군을 실행하기 시작하는 상태의 이름. StartAt의 값은 States 객체에 나열된 상태 중 하나로 설정해야 합니다.

States

사용자 정의 상태 이름을 유효한 IDT 상태에 매핑하는 객체입니다. 각 상태.state-name 객체에는 상태 state-name에 매핑된 유효한 상태의 정의가 포함됩니다.

States 객체에는 SucceedFail 상태가 포함되어야 합니다. 유효한 상태에 대한 자세한 내용은 유효한 상태 및 상태 정의 섹션을 참조하세요.

유효한 상태 및 상태 정의

이 섹션에서는 IDT 상태 머신에서 사용할 수 있는 모든 유효한 상태의 상태 정의를 설명합니다. 다음 상태 중 일부는 테스트 케이스 수준의 구성을 지원합니다. 하지만 꼭 필요한 경우가 아니면 테스트 케이스 수준 대신 테스트 그룹 수준에서 상태 전환 규칙을 구성하는 것이 좋습니다.

RunTask

RunTask 상태는 테스트 제품군에 정의된 테스트 그룹에서 테스트 케이스를 실행합니다.

{ "Type": "RunTask", "Next": "<state-name>", "TestGroup": "<group-id>", "TestCases": [ "<test-id>" ], "ResultVar": "<result-name>" }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

TestGroup

선택 사항. 실행할 테스트 그룹의 ID. 이 값을 지정하지 않으면 IDT는 테스트 실행기가 선택한 테스트 그룹을 실행합니다.

TestCases

선택 사항. TestGroup에서 지정한 그룹의 테스트 케이스 ID 배열. IDT는 TestGroupTestCases 값을 기반으로 다음과 같이 테스트 실행 동작을 결정합니다.

  • TestGroupTestCases가 모두 지정된 경우 IDT는 테스트 그룹에서 지정된 테스트 케이스를 실행합니다.

  • TestCases가 지정되었지만 TestGroup이 지정되지 않은 경우 IDT는 지정된 테스트 케이스를 실행합니다.

  • TestGroup이 지정되었지만 TestCases가 지정되지 않은 경우 IDT는 지정된 테스트 그룹 내의 모든 테스트 케이스를 실행합니다.

  • TestGroup 또는 TestCases 둘 다 지정되지 않은 경우 IDT는 테스트 실행기가 IDT CLI에서 선택한 테스트 그룹에서 모든 테스트 케이스를 실행합니다. 테스트 실행기에 대한 그룹 선택을 활성화하려면 statemachine.json 파일에 RunTaskChoice 상태를 모두 포함해야 합니다. 작동 방식에 대한 예제는 상태 시스템 예시: 사용자가 선택한 테스트 그룹 실행을 참조하십시오.

    테스트 실행기의 IDT CLI 명령 활성화에 대한 자세한 내용은 IDT CLI 명령을 활성화합니다. 섹션을 참조하세요.

ResultVar

테스트 실행 결과와 함께 설정할 컨텍스트 변수의 이름. TestGroup에 대한 값을 지정하지 않은 경우 이 값을 지정하지 마십시오. IDT는 다음에 따라 ResultVar에서 true 또는 false로 정의한 변수 값을 설정합니다.

  • 변수 이름의 text_text_passed 형식인 경우 값은 첫 번째 테스트 그룹의 모든 테스트를 통과했는지 아니면 건너뛰었는지로 설정됩니다.

  • 다른 모든 경우에는 값이 모든 테스트 그룹의 모든 테스트를 통과했는지 아니면 건너뛰었는지로 설정됩니다.

일반적으로 RunTask 상태를 사용하여 개별 테스트 케이스 ID를 지정하지 않고 테스트 그룹 ID를 지정하면 IDT가 지정된 테스트 그룹의 모든 테스트 케이스를 실행하게 됩니다. 이 상태에서 실행되는 모든 테스트 케이스는 무작위 순서로 병렬로 실행됩니다. 그러나 모든 테스트 케이스를 실행하는 데 디바이스가 필요하고 사용 가능한 디바이스가 하나뿐인 경우에는 테스트 케이스가 대신 순차적으로 실행됩니다.

오류 처리

지정된 테스트 그룹 또는 테스트 케이스 ID가 유효하지 않은 경우 이 상태에서는 RunTaskError 실행 오류가 발생합니다. 상태에서 실행 오류가 발생하는 경우 상태 머신 컨텍스트의 hasExecutionError 변수도 true로 설정됩니다.

Choice

Choice 상태를 사용하면 사용자 정의 조건에 따라 전환할 다음 상태를 동적으로 설정할 수 있습니다.

{ "Type": "Choice", "Default": "<state-name>", "FallthroughOnError": true | false, "Choices": [ { "Expression": "<expression>", "Next": "<state-name>" } ] }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Default

Choices에 정의된 표현식을 true로 평가할 수 없는 경우 전환할 기본 상태입니다.

FallthroughOnError

선택 사항. 상태에서 표현식을 평가할 때 오류가 발생할 경우의 동작을 지정합니다. 평가 결과 오류가 발생할 경우 표현식을 건너뛰려면 true로 설정합니다. 일치하는 표현식이 없는 경우 상태 머신은 해당 Default 상태로 전환됩니다. false 값이 지정하지 않은 경우 기본값은 FallthroughOnError입니다.

Choices

현재 상태에서 동작을 실행한 후 전환할 상태를 결정하는 표현식 및 상태의 배열입니다.

Choices.Expression

부울 값으로 평가되어야 하는 표현식 문자열입니다. 표현식이 true로 평가되면 상태 머신은 Choices.Next에 정의된 상태로 전환됩니다. 표현식 문자열은 상태 시스템 컨텍스트에서 값을 검색한 다음 해당 값에 대한 연산을 수행하여 부울 값에 도달합니다. 상태 머신 컨텍스트 액세스에 대한 자세한 내용은 상태 머신 컨텍스트 섹션을 참조하세요.

Choices.Next

Choices.Expression에 정의된 표현식이 true로 평가되면 전환할 상태의 이름.

오류 처리

Choice 상태는 다음과 같은 경우에 오류 처리를 요구할 수 있습니다.

  • 선택 표현식의 일부 변수는 상태 머신 컨텍스트에 존재하지 않습니다.

  • 표현식의 결과는 부울 값이 아닙니다.

  • JSON 조회 결과는 문자열, 숫자 또는 부울이 아닙니다.

이 상태에서는 Catch 블록을 사용하여 오류를 처리할 수 없습니다. 오류가 발생했을 때 상태 머신 실행을 중지하려면 FallthroughOnErrorfalse로 설정해야 합니다. 하지만 사용 사례에 따라 다음 중 하나를 수행하도록 FallthroughOnErrortrue로 설정하는 것이 좋습니다.

  • 액세스하는 변수가 존재하지 않을 것으로 예상되는 경우가 있다면, Default의 값과 추가 Choices 블록을 사용하여 다음 상태를 지정하십시오.

  • 액세스 중인 변수가 항상 존재해야 하는 경우 Default 상태를 Fail로 설정하십시오.

Parallel

Parallel 상태를 사용하면 새 상태 머신을 서로 병렬로 정의하고 실행할 수 있습니다.

{ "Type": "Parallel", "Next": "<state-name>", "Branches": [ <state-machine-definition> ] }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

Branches

실행할 상태 머신 정의의 배열입니다. 각 스테이트 머신 정의에는 고유한 StartAt, Succeed, Fail 상태가 포함되어야 합니다. 이 배열의 상태 머신 정의는 자체 정의 이외의 상태를 참조할 수 없습니다.

참고

각 브랜치 상태 머신은 동일한 상태 머신 컨텍스트를 공유하므로 한 브랜치에서 변수를 설정한 다음 다른 브랜치에서 해당 변수를 읽으면 예상치 못한 동작이 발생할 수 있습니다.

브랜치 상태 머신을 모두 실행한 후에만 Parallel 상태가 다음 상태로 이동합니다. 디바이스가 필요한 각 상태는 디바이스를 사용할 수 있을 때까지 실행을 대기합니다. 여러 디바이스를 사용할 수 있는 경우 이 상태는 여러 그룹의 테스트 케이스를 병렬로 실행합니다. 사용할 수 있는 디바이스가 충분하지 않으면 테스트 케이스가 순차적으로 실행됩니다. 테스트 케이스는 병렬로 실행될 때 무작위 순서로 실행되므로 동일한 테스트 그룹에서 테스트를 실행하는 데 여러 디바이스가 사용될 수 있습니다.

오류 처리

실행 오류를 처리하려면 브랜치 상태 머신과 부모 상태 머신이 모두 해당 Fail 상태로 전환되는지 확인하십시오.

브랜치 상태 머신은 부모 상태 머신에 실행 오류를 전송하지 않으므로 Catch 블록을 사용하여 브랜치 상태 머신의 실행 오류를 처리할 수 없습니다. 대신 공유 상태 머신 컨텍스트의 hasExecutionErrors 값을 사용하십시오. 이렇게 하는 방법의 예는 상태 머신 예제: 두 테스트 그룹을 병렬로 실행 섹션을 참조하세요.

AddProductFeatures

AddProductFeatures 상태에서는 IDT에서 생성한 awsiotdevicetester_report.xml 파일에 제품 기능을 추가할 수 있습니다.

제품 기능은 디바이스가 충족할 수 있는 특정 기준에 대한 사용자 정의 정보입니다. 예를 들어, MQTT 제품 기능은 디바이스가 MQTT 메시지를 올바르게 게시하도록 지정할 수 있습니다. 보고서에서 제품 기능은 지정된 테스트의 통과 여부에 따라 supported, not-supported 또는 사용자 지정 값으로 설정됩니다.

참고

AddProductFeatures 상태는 자체적으로 보고서를 생성하지 않습니다. 보고서를 생성하려면 이 상태를 Report 상태로 전환해야 합니다.

{ "Type": "Parallel", "Next": "<state-name>", "Features": [ { "Feature": "<feature-name>", "Groups": [ "<group-id>" ], "OneOfGroups": [ "<group-id>" ], "TestCases": [ "<test-id>" ], "IsRequired": true | false, "ExecutionMethods": [ "<execution-method>" ] } ] }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

Features

awsiotdevicetester_report.xml 파일에 표시할 제품 기능의 배열.

Feature

기능의 이름입니다.

FeatureValue

선택 사항. 보고서에서 supported 대신 사용할 사용자 지정 값입니다. 이 값을 지정하지 않으면 테스트 결과에 따라 기능 값이 supported 또는 not-supported로 설정됩니다.

FeatureValue에 사용자 지정 값을 사용하면 동일한 기능을 다른 조건으로 테스트할 수 있으며, IDT는 지원되는 조건에 대한 기능 값을 연결합니다. 예를 들어, 다음 발췌문은 두 개의 개별 기능 값이 있는 MyFeature 기능을 보여줍니다.

... { "Feature": "MyFeature", "FeatureValue": "first-feature-supported", "Groups": ["first-feature-group"] }, { "Feature": "MyFeature", "FeatureValue": "second-feature-supported", "Groups": ["second-feature-group"] }, ...

두 테스트 그룹이 모두 통과하면 기능 값이 first-feature-supported, second-feature-supported로 설정됩니다.

Groups

선택 사항. 테스트 그룹 ID의 배열입니다. 기능을 지원하려면 지정된 각 테스트 그룹 내의 모든 테스트를 통과해야 합니다.

OneOfGroups

선택 사항. 테스트 그룹 ID의 배열입니다. 기능이 지원되려면 지정된 테스트 그룹 중 하나 이상의 모든 테스트를 통과해야 합니다.

TestCases

선택 사항. 테스트 케이스 ID의 배열입니다. 이 값을 지정하면 다음이 적용됩니다.

  • 기능이 지원되려면 지정된 모든 테스트 케이스를 통과해야 합니다.

  • Groups은 테스트 그룹 ID는 하나만 포함해야 합니다.

  • OneOfGroups은 지정하지 않아야 합니다.

IsRequired

선택 사항. 보고서에서 이 기능을 선택적 기능으로 표시하려면 false로 설정합니다. 기본 값은 true입니다.

ExecutionMethods

선택 사항. device.json 파일에 지정된 protocol 값과 일치하는 실행 메서드의 배열. 이 값을 지정하는 경우 테스트 실행기는 이 배열의 값 중 하나와 일치하는 protocol 값을 지정하여 보고서에 기능을 포함해야 합니다. 이 값을 지정하지 않으면 기능이 항상 보고서에 포함됩니다.

AddProductFeatures 상태를 사용하려면 RunTask 상태의 ResultVar 값을 다음 값 중 하나로 설정해야 합니다.

  • 개별 테스트 케이스 ID를 지정한 경우 ResultVar을(를) group-id_test-id_passed(으)로 설정합니다.

  • 개별 테스트 케이스 ID를 지정하지 않은 경우 ResultVar을(를) group-id_passed(으)로 설정합니다.

AddProductFeatures 상태에서는 다음과 같은 방식으로 테스트 결과를 확인합니다.

  • 테스트 케이스 ID를 지정하지 않은 경우 각 테스트 그룹의 결과는 상태 머신 컨텍스트의 group-id_passed 변수 값에 따라 결정됩니다.

  • 테스트 케이스 ID를 지정한 경우 각 테스트의 결과는 상태 머신 컨텍스트의 group-id_test-id_passed 변수 값을 기반으로 결정됩니다.

오류 처리

이 상태에서 제공된 그룹 ID가 유효한 그룹 ID가 아닌 경우 이 상태로 인해 AddProductFeaturesError 실행 오류가 발생합니다. 상태에서 실행 오류가 발생하는 경우 상태 머신 컨텍스트의 hasExecutionErrors 변수도 true로 설정됩니다.

보고서

Report 상태는 suite-name_Report.xmlawsiotdevicetester_report.xml 파일을 생성합니다. 또한 이 상태는 보고서를 콘솔로 스트리밍합니다.

{ "Type": "Report", "Next": "<state-name>" }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

테스트 실행기가 테스트 결과를 볼 수 있도록 테스트 실행 흐름이 끝날 무렵에는 항상 Report 상태로 전환해야 합니다. 일반적으로 이 상태 이후의 다음 상태는 Succeed입니다.

오류 처리

이 상태에서 보고서를 생성하는 데 문제가 발생하면 ReportError 실행 오류가 발생합니다.

LogMessage

LogMessage 상태는 test_manager.log 파일을 생성하고 로그 메시지를 콘솔로 스트리밍합니다.

{ "Type": "LogMessage", "Next": "<state-name>" "Level": "info | warn | error" "Message": "<message>" }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

Level

로그 메시지를 생성할 때의 오류 수준입니다. 유효하지 않은 수준을 지정하면 이 상태가 오류 메시지를 생성하고 삭제합니다.

Message

로그할 메시지.

SelectGroup

SelectGroup 상태는 상태 머신 컨텍스트를 업데이트하여 선택된 그룹을 나타냅니다. 이 상태에서 설정된 값은 이후의 모든 Choice 상태에서 사용됩니다.

{ "Type": "SelectGroup", "Next": "<state-name>" "TestGroups": [ <group-id>" ] }

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Next

현재 상태에서 작업을 실행한 후 전환할 상태의 이름입니다.

TestGroups

선택된 것으로 표시될 테스트 그룹 배열입니다. 이 배열의 각 테스트 그룹 ID에 대해 group-id_selected 변수는 컨텍스트에서 true로 설정됩니다. IDT는 지정된 그룹이 존재하는지 여부를 확인하지 않으므로 유효한 테스트 그룹 ID를 제공해야 합니다.

Fail

Fail 상태는 상태 머신이 제대로 실행되지 않았음을 나타냅니다. 이는 상태 머신의 종료 상태이며 각 상태 머신 정의에는 이 상태가 포함되어야 합니다.

{ "Type": "Fail" }

Succeed

Succeed 상태는 상태 머신이 올바르게 실행되었음을 나타냅니다. 이는 상태 머신의 종료 상태이며 각 상태 머신 정의에는 이 상태가 포함되어야 합니다.

{ "Type": "Succeed" }

상태 머신 컨텍스트

상태 머신 컨텍스트는 실행 중에 상태 머신이 사용할 수 있는 데이터를 포함하는 읽기 전용 JSON 문서입니다. 상태 머신 컨텍스트는 상태 머신에서만 액세스할 수 있으며 테스트 흐름을 결정하는 정보를 포함합니다. 예를 들어 userdata.json 파일에서 테스트 실행기가 구성한 정보를 사용하여 특정 테스트 실행이 필요한지 여부를 결정할 수 있습니다.

상태 머신 컨텍스트는 다음 형식을 사용합니다.

{ "pool": { <device-json-pool-element> }, "userData": { <userdata-json-content> }, "config": { <config-json-content> }, "suiteFailed": true | false, "specificTestGroups": [ "<group-id>" ], "specificTestCases": [ "<test-id>" ], "hasExecutionErrors": true }
pool

테스트 실행을 위해 선택한 디바이스 풀에 대한 정보. 선택한 디바이스 풀의 경우 이 정보는 device.json 파일에 정의된 해당 최상위 디바이스 풀 배열 요소에서 검색됩니다.

userData

userdata.json 파일의 정보.

config

정보는 config.json 파일을 정의합니다.

suiteFailed

값은 상태 머신이 시작될 때 false로 설정됩니다. 테스트 그룹이 RunTask 상태로 실패하는 경우 이 값은 상태 머신의 남은 실행 기간 동안으로 true로 설정됩니다.

specificTestGroups

테스트 실행기가 전체 테스트 제품군 대신 실행할 특정 테스트 그룹을 선택하면 이 키가 생성되고 여기에는 특정 테스트 그룹 ID 목록이 포함됩니다.

specificTestCases

테스트 실행기가 전체 테스트 제품군 대신 실행할 특정 테스트 케이스를 선택하면 이 키가 생성되고 여기에는 특정 테스트 케이스 ID 목록이 포함됩니다.

hasExecutionErrors

상태 머신이 시작될 때 종료되지 않습니다. 어떤 상태에서든 실행 오류가 발생하는 경우 이 변수가 생성되고 남은 상태 머신 실행 기간 동안 true로 설정됩니다.

JSONPath 표기법을 사용하여 컨텍스트를 쿼리할 수 있습니다. 상태 정의의 JSONPath 쿼리 구문은 {{$.query}}입니다. 일부 상태에서는 JSONPath 쿼리를 자리 표시자 문자열로 사용할 수 있습니다. IDT는 자리 표시자 문자열을 컨텍스트에서 평가된 JSONPath 쿼리의 값으로 대체합니다. 다음 값에 자리 표시자를 사용할 수 있습니다.

  • RunTask 상태의 TestCases 값.

  • ExpressionChoice 상태.

상태 머신 컨텍스트에서 데이터에 액세스할 때 다음 조건이 충족되는지 확인하십시오.

  • JSON 경로는 $.로 시작해야 합니다.

  • 각 값은 문자열, 숫자 또는 부울로 평가되어야 합니다.

JSONPath 표기법을 사용하여 컨텍스트에서 데이터에 액세스하는 방법에 대한 자세한 내용은 IDT 컨텍스트 사용 섹션을 참조하십시오.

실행 오류

실행 오류는 상태 머신이 상태를 실행할 때 발생하는 상태 머신 정의의 오류입니다. IDT는 test_manager.log 파일의 각 오류에 대한 정보를 기록하고 로그 메시지를 콘솔로 스트리밍합니다.

다음 방법을 사용하여 실행 오류를 처리할 수 있습니다.

Catch

Catch를 사용하려면 상태 정의에 다음을 추가하십시오.

"Catch": [ { "ErrorEquals": [ "<error-type>" ] "Next": "<state-name>" } ]

여기 설명된 것처럼 값이 포함된 모든 필드는 필수입니다.

Catch.ErrorEquals

캐치할 오류 유형의 배열입니다. 실행 오류가 지정된 값 중 하나와 일치하면 상태 머신이 Catch.Next에서 지정된 상태로 전환됩니다. 발생하는 오류 유형에 대한 자세한 내용은 각 상태 정의를 참조하십시오.

Catch.Next

현재 상태에서 Catch.ErrorEquals에서 지정한 값 중 하나와 일치하는 실행 오류가 발생하는 경우 전환할 다음 상태입니다.

Catch 블록은 둘 중 하나가 일치할 때까지 순차적으로 처리됩니다. Catch 블록에 나열된 오류와 일치하는 오류가 없으면 상태 머신이 계속 실행됩니다. 실행 오류는 잘못된 상태 정의로 인해 발생하므로 상태에 실행 오류가 발생하면 Fail 상태로 전환하는 것이 좋습니다.

hasExecutionError

일부 상태에서는 실행 오류가 발생하는 경우 오류가 발생하는 것 외에도 상태 시스템 컨텍스트에서 hasExecutionError 값을 true로 설정합니다. 이 값을 사용하여 오류 발생 시기를 감지한 다음 Choice 상태를 사용하여 상태 머신을 해당 Fail 상태로 전환할 수 있습니다.

이 메서드는 다음과 특징이 있습니다.

  • 상태 머신은 hasExecutionError에 할당된 어떤 값으로도 시작되지 않으며 특정 상태가 값을 설정하기 전까지는 이 값을 사용할 수 없습니다. 즉, 실행 오류가 발생하지 않을 경우 상태 머신이 중지되지 않도록 이 값에 액세스하는 Choice 상태에 대해 명시적으로 FallthroughOnErrorfalse로 설정해야 합니다.

  • true로 설정한 후에는 hasExecutionError가 false로 설정되거나 컨텍스트에서 제거되지 않습니다. 즉, 이 값은 true로 처음 설정할 때만 유용하며 이후의 모든 상태에서는 의미 있는 값을 제공하지 않습니다.

  • hasExecutionError 값은 Parallel 상태의 모든 브랜치 상태 머신과 공유되므로 액세스 순서에 따라 예상치 못한 결과가 발생할 수 있습니다.

이러한 특성 때문에 Catch 블록을 대신 사용할 수 있는 경우에는 이 방법을 사용하지 않는 것이 좋습니다.

상태 머신 예제

이 섹션에서는 몇 가지 상태 시스템 구성의 예제를 제공합니다.

상태 머신 예제: 단일 테스트 그룹 실행

이 상태 머신:

  • ID GroupA를 사용하여 테스트 그룹을 실행하며 이 ID는 group.json 파일에 있어야 합니다.

  • 실행 오류가 있는지 확인하고 오류가 있는 경우, Fail로 전환합니다.

  • 보고서를 생성하고 오류가 없는 경우 Succeed로 전환하고 그렇지 않으면 Fail로 전환합니다.

{ "Comment": "Runs a single group and then generates a report.", "StartAt": "RunGroupA", "States": { "RunGroupA": { "Type": "RunTask", "Next": "Report", "TestGroup": "GroupA", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "Report": { "Type": "Report", "Next": "Succeed", "Catch": [ { "ErrorEquals": [ "ReportError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }

상태 머신 예제: 사용자가 선택한 테스트 그룹 실행

이 상태 머신:

  • 테스트 실행기가 특정 테스트 그룹을 선택했는지 확인합니다. 테스트 실행기가 테스트 그룹을 선택하지 않으면 테스트 케이스를 선택할 수 없기 때문에 상태 머신은 특정 테스트 케이스를 확인하지 않습니다.

  • 테스트 그룹을 선택한 경우:

    • 선택한 테스트 그룹 내에서 테스트 케이스를 실행합니다. 이를 위해 상태 머신은 RunTask 상태의 테스트 그룹이나 테스트 케이스를 명시적으로 지정하지 않습니다.

    • 모든 테스트를 실행한 후 보고서를 생성하고 종료합니다.

  • 테스트 그룹을 선택하지 않은 경우:

    • 테스트 그룹 GroupA에서 테스트를 실행합니다.

    • 보고서를 생성하고 종료합니다.

{ "Comment": "Runs specific groups if the test runner chose to do that, otherwise runs GroupA.", "StartAt": "SpecificGroupsCheck", "States": { "SpecificGroupsCheck": { "Type": "Choice", "Default": "RunGroupA", "FallthroughOnError": true, "Choices": [ { "Expression": "{{$.specificTestGroups[0]}} != ''", "Next": "RunSpecificGroups" } ] }, "RunSpecificGroups": { "Type": "RunTask", "Next": "Report", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "RunGroupA": { "Type": "RunTask", "Next": "Report", "TestGroup": "GroupA", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "Report": { "Type": "Report", "Next": "Succeed", "Catch": [ { "ErrorEquals": [ "ReportError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }

상태 머신 예제: 제품 기능이 포함된 단일 테스트 그룹 실행

이 상태 머신:

  • 테스트 그룹 GroupA를 실행합니다.

  • 실행 오류가 있는지 확인하고 오류가 있는 경우, Fail로 전환합니다.

  • awsiotdevicetester_report.xml 파일에 FeatureThatDependsOnGroupA 기능을 추가합니다.

    • GroupA가 통과하면 기능이 supported로 설정됩니다.

    • 이 기능은 보고서에서 선택 사항으로 표시되어 있지 않습니다.

  • 보고서를 생성하고 오류가 없는 경우 Succeed로 전환하고 그렇지 않으면 Fail로 전환합니다.

{ "Comment": "Runs GroupA and adds product features based on GroupA", "StartAt": "RunGroupA", "States": { "RunGroupA": { "Type": "RunTask", "Next": "AddProductFeatures", "TestGroup": "GroupA", "ResultVar": "GroupA_passed", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "AddProductFeatures": { "Type": "AddProductFeatures", "Next": "Report", "Features": [ { "Feature": "FeatureThatDependsOnGroupA", "Groups": [ "GroupA" ], "IsRequired": true } ] }, "Report": { "Type": "Report", "Next": "Succeed", "Catch": [ { "ErrorEquals": [ "ReportError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }

상태 머신 예제: 두 테스트 그룹을 병렬로 실행

이 상태 머신:

  • GroupAGroupB 테스트 그룹을 병렬로 실행합니다. 브랜치 상태 머신의 RunTask 상태에 의해 컨텍스트에 저장된 ResultVar 변수는 AddProductFeatures 상태에서 사용할 수 있습니다.

  • 실행 오류가 있는지 확인하고 오류가 있는 경우, Fail로 전환합니다. 이 상태 머신은 Catch 블록을 사용하지 않습니다. 해당 메서드는 브랜치 상태 머신의 실행 오류를 감지하지 못하기 때문입니다.

  • 통과한 그룹을 기반으로 awsiotdevicetester_report.xml 파일에 기능을 추가합니다.

    • GroupA가 통과하면 기능이 supported로 설정됩니다.

    • 이 기능은 보고서에서 선택 사항으로 표시되어 있지 않습니다.

  • 보고서를 생성하고 오류가 없는 경우 Succeed로 전환하고 그렇지 않으면 Fail로 전환합니다.

디바이스 풀에 두 개의 디바이스가 구성된 경우 GroupAGroupB 둘 다 동시에 실행할 수 있습니다. 그러나 GroupA 또는 GroupB 둘 중 하나에 여러 테스트가 포함된 경우에는 두 디바이스 모두 해당 테스트에 할당될 수 있습니다. 디바이스가 하나만 구성된 경우 테스트 그룹은 순차적으로 실행됩니다.

{ "Comment": "Runs GroupA and GroupB in parallel", "StartAt": "RunGroupAAndB", "States": { "RunGroupAAndB": { "Type": "Parallel", "Next": "CheckForErrors", "Branches": [ { "Comment": "Run GroupA state machine", "StartAt": "RunGroupA", "States": { "RunGroupA": { "Type": "RunTask", "Next": "Succeed", "TestGroup": "GroupA", "ResultVar": "GroupA_passed", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }, { "Comment": "Run GroupB state machine", "StartAt": "RunGroupB", "States": { "RunGroupA": { "Type": "RunTask", "Next": "Succeed", "TestGroup": "GroupB", "ResultVar": "GroupB_passed", "Catch": [ { "ErrorEquals": [ "RunTaskError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } } ] }, "CheckForErrors": { "Type": "Choice", "Default": "AddProductFeatures", "FallthroughOnError": true, "Choices": [ { "Expression": "{{$.hasExecutionErrors}} == true", "Next": "Fail" } ] }, "AddProductFeatures": { "Type": "AddProductFeatures", "Next": "Report", "Features": [ { "Feature": "FeatureThatDependsOnGroupA", "Groups": [ "GroupA" ], "IsRequired": true }, { "Feature": "FeatureThatDependsOnGroupB", "Groups": [ "GroupB" ], "IsRequired": true } ] }, "Report": { "Type": "Report", "Next": "Succeed", "Catch": [ { "ErrorEquals": [ "ReportError" ], "Next": "Fail" } ] }, "Succeed": { "Type": "Succeed" }, "Fail": { "Type": "Fail" } } }