在儀表板中檢視實驗結果

您可以在實驗進行中及完成後，看到實驗的統計結果。實驗開始後 63 天內可獲得實驗結果。之後，由於 CloudWatch 資料保留原則，無法使用它們。

在每個變化至少有 100 個事件前，不會顯示任何統計結果。

Evidently 會在實驗結束時執行額外的離線 p 值分析。某些情況下，當實驗期間使用的任何時間 p 值未發現統計顯著性時，離線 p 值分析可以偵測到統計顯著性。

有關如何 CloudWatch 明顯地計算實驗結果的更多信息，請參閱Evidently 如何計算結果。

查看實驗結果

1. 請在以下位置開啟 CloudWatch 主控台。 https://console.aws.amazon.com/cloudwatch/

2. 在導航窗格中，選擇應用程序信號，顯而易見。

3. 選擇其中包含實驗的專案名稱。

4. 選擇 Experiments (實驗) 索引標籤。

5. 選擇實驗的名稱，然後選擇 Results (結果) 索引標籤。

6. 依 Variation performance (變化效能)，有一個控制項，您可以在其中選取要顯示的實驗統計數字。如果選取一個以上的統計數字，則 Evidently 會顯示每個統計數字的圖形和資料表。

   每個圖形和資料表都會顯示到目前為止的實驗結果。

   每個圖形都可以顯示以下結果。您可以使用圖形右側的控制項來決定要顯示下列哪些項目：

   • 每個變化記錄的使用者工作階段事件數目。

   • 在圖形頂端針對每個變化選取的指標平均值。

   • 實驗的統計意義。這會比較圖形頂端所選指標之預設變化與每個其他變化之間的差異。

   • 所選指標差異的 95% 上下信賴繫結 (每個變化與預設變化之間)。

   資料表會針對每個變化顯示一列。對於每個不是預設的變化，Evidently 會顯示其是否已經收到足夠的資料來聲明結果具有統計學意義。它還會顯示變化統計值的改進是否已達到 95% 的信賴等級。

   最後，在 Result (結果) 資料欄中，Evidently 會根據此統計數字或結果是否不確定，來提供關於哪一種變化效能最佳的建議。