Ein informationstheoretischer Ansatz zur Unsicherheit - AWSPräskriptive Anleitung

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Ein informationstheoretischer Ansatz zur Unsicherheit

Die Erklärung der Unsicherheit in dervorheriger Abschnittstützt sich nur auf den Varianzbegriff der Unsicherheit, aber auch informationstheoretische Vorstellungen von Unsicherheit existieren. Die Einbeziehung der informationstheoretischen aleatorischen Unsicherheit verbessert die Robustheit der Gesamt-Unsicherheits-Schätzung (Gal 2016,Hein, Andriushchenko und Bitterwolf 2019,van Amersfoort et al. 2020) enthalten. Die totale Unsicherheit wird anhand der Entropie von Shannon gemessen:


    Shannons Entropie

where ist der Punkt-Produkt-Operator und ist die Anzahl der Klassen.

Die prädiktive Entropie ist sowohl für bayesische als auch nicht-bayesische neuronale Netze verfügbar. Um diese totale Unsicherheit in die epistemischen und aleatorischen Komponenten zu zerlegen, müssen Sie die gegenseitigen Informationen abschätzen , und dies erfordert einen bayesischen Ansatz.


    Gegenseitiger Information