예측기 모니터링

참고

예측기 모니터링을 활성화하면 Amazon Forecast는 예측 데이터를 삭제한 후에도 예측기 성능 분석을 위해 각 예측의 데이터를 저장합니다. 이 데이터를 삭제하려면 모니터링 리소스를 삭제하세요.

예측기 모니터링을 사용하면 시간 경과에 따라 예측기의 성능이 어떻게 변하는지 볼 수 있습니다. 경제 발전이나 고객 행동 변화 등 다양한 요인으로 인해 성능이 달라질 수 있습니다.

예를 들어 대상이 sales이고 price 및 color의 두 관련 속성이 있는 예측 시나리오를 생각해 보세요. 첫 번째 예측기를 생성한 후 몇 달이 지나 특정 색상이 예기치 않게 고객에게 인기가 높아질 수 있습니다. 이로 인해 이 속성을 가진 항목의 판매량이 증가할 수 있습니다. 이 새 데이터는 예측기의 성능과 예측기가 생성하는 예측의 정확도에 영향을 미칠 수 있습니다.

예측기 모니터링을 활성화하면 Forecast는 사용자가 예측을 생성하고 더 많은 데이터를 가져올 때 예측기의 성능을 분석합니다. Forecast는 새 데이터를 이전 예측과 비교하여 성능의 변화를 감지합니다. Forecast 콘솔에서 시간 경과에 따른 다양한 정확도 지표의 변화를 그래프로 확인할 수 있습니다. 또는 ListMonitorEvaluations 작업을 통해 모니터링 결과를 얻을 수 있습니다.

예측기 모니터링은 예측기를 재훈련할 시기가 되었는지 판단하는 데 도움이 될 수 있습니다. 성능이 저하되는 경우 더 많은 최신 데이터를 사용하여 예측기를 재훈련하는 것이 좋습니다. 예측기를 재훈련하기로 선택한 경우 새 예측기에는 이전 예측기의 모니터링 데이터가 포함됩니다. 예측기 모니터링을 사용하여 프로덕션 환경에 대한 컨텍스트 데이터를 수집하거나 다양한 실험을 비교할 수도 있습니다.

예측기 모니터링은 AutoPredictor에만 사용할 수 없습니다. 기존 레거시 예측기를 AutoPredictor로 업그레이드할 수 있습니다. AutoPredictor로 업그레이드를 참조하세요.

주제

• 예측기 모니터링 워크플로
• 예측기 모니터링 활성화
• 모니터링 결과 보기
• 제한 및 모범 사례

예측기 모니터링 워크플로

예측기 모니터링 결과를 가져오려면 먼저 예측기를 사용하여 예측을 생성한 다음 추가 데이터를 가져와야 합니다. 모니터링 워크플로는 다음과 같습니다.

1. 자동 예측기에 대한 예측기 모니터링 활성화:

   • 모니터링이 활성화된 새 예측기를 생성합니다. 새 예측기에 대한 예측기 모니터링 활성화 섹션을 참조하세요.

   • 또는 기존 예측기에 대한 모니터링을 활성화합니다. 기존 예측기에 대한 예측기 모니터링 활성화 섹션을 참조하세요.

2. 예측기를 사용하여 하나 이상의 예측을 생성합니다.

3. 더 많은 데이터를 가져옵니다. Forecast로 데이터 가져오기에 대한 자세한 내용은 데이터 세트 가져오기을 참조하세요.

4. 예측기 모니터링 결과 보기:

   • 예측기의 모니터링 탭에서 결과를 볼 수 있습니다.

   • 또는 ListMonitorEvaluations 작업을 통해 모니터링 결과를 얻을 수 있습니다.

   자세한 내용은 모니터링 결과 보기 섹션을 참조하세요.

제한 및 모범 사례

예측기 모니터링을 사용할 때는 다음 제한 및 모범 사례를 고려하세요.

• 예측기 모니터링은 자동 예측기에만 사용할 수 있습니다 - AutoML을 사용하거나 수동 선택을 통해 생성한 레거시 예측기에서는 모니터링을 활성화할 수 없습니다. AutoPredictor로 업그레이드를 참조하세요.

• 예측기 모니터링은 자동 예측기마다 고유합니다 - 자동 예측기당 하나의 모니터만 생성할 수 있습니다.

• 예측기 모니터링에는 새 데이터와 예측 생성이 필요합니다 - 새 예측을 생성하는 데 사용되는 새 데이터를 가져오면 예측기 모니터링 결과를 사용할 수 있게 됩니다. 새 데이터를 가져오지 않거나 새로 가져온 데이터가 전체 예측 기간을 포괄하지 않는 경우에는 모니터링 결과를 볼 수 없습니다.

• 예측기 모니터링에는 새 예측이 필요합니다 - 모니터링 결과를 생성하려면 새 예측을 지속적으로 생성해야 합니다. 새 예측을 생성하지 않는 경우 모니터링 결과가 표시되지 않습니다.

• Amazon Forecast는 예측기 성능 분석을 위해 각 예측의 데이터를 저장합니다 - 예측을 삭제하더라도 Forecast는 이러한 데이터를 저장합니다. 이러한 데이터를 삭제하려면 연결된 모니터를 삭제하세요.

• StopResource 작업은 모든 현재 평가와 모든 미래 평가를 중지합니다.

• avGWQL 지표는 평균이 아닌 분위수에 대한 예측을 생성할 때만 사용할 수 있습니다.

• 진행 중인 모니터 평가는 ListMonitorEvaluations 작업에 표시되지 않습니다.