Kolmogorov-Smirnov (KS) - Amazon SageMaker

Las traducciones son generadas a través de traducción automática. En caso de conflicto entre la traducción y la version original de inglés, prevalecerá la version en inglés.

Kolmogorov-Smirnov (KS)

La métrica de sesgo de Kolmogorov-Smirnov (KS) es igual a la divergencia máxima entre las etiquetas de las distribuciones de las facetas a y d de un conjunto de datos. La prueba KS de dos muestras implementada por SageMaker Clarify complementa las demás medidas del desequilibrio de etiquetas al encontrar la etiqueta más desequilibrada.

La fórmula de la métrica de Kolmogorov-Smirnov es la siguiente:

        KS = max(|Pa(y) - Pd(y)|)

Por ejemplo, suponga que un grupo de candidatos (faceta a) a la universidad son rechazados, están en lista de espera o son aceptados con un 40 %, 40 % o 20 %, respectivamente, y que estas tasas para otros solicitantes (faceta d) son del 20 %, 10 % y 70 %. Entonces, el valor de la métrica de sesgo de Kolmogorov-Smirnov es el siguiente:

KS = máx(|0,4-0,2|, |0,4-0,1|, |0,2-0,7|) = 0,5

Esto nos indica que la divergencia máxima entre las distribuciones de facetas es de 0,5 y se produce en las tasas de aceptación. Hay tres términos en la ecuación porque las etiquetas son multiclase de cardinalidad tres.

El rango de valores LP para los resultados binarios, multicategoría y continuos es [0, +1], donde:

  • Los valores cercanos a cero indican que las etiquetas se distribuyeron uniformemente entre las facetas de todas las categorías de resultados. Por ejemplo, ambas facetas que solicitaron un préstamo obtuvieron el 50 % de aceptaciones y el 50 % de rechazos.

  • Los valores cercanos a uno indican que las etiquetas de un resultado estaban todas en una sola faceta. Por ejemplo, la faceta a obtuvo el 100 % de las aceptaciones y la faceta d no obtuvo ninguna.

  • Los valores intermitentes indican los grados relativos del desequilibrio máximo de la etiqueta.