You are here: University of Vienna PHAIDRA Detail o:1350476
Title (eng)
The Wasserstein Distance and its Application to Generative Adversarial Networks
Parallel title (deu)
Die Wasserstein Distanz und ihre Anwendung in Generative Adversarial Networks
Author
Alina Franziska Leuchtenberger
Adviser
Philipp Grohs
Assessor
Philipp Grohs
Abstract (deu)
In dieser Arbeit geht es um die Wasserstein-Distanz, die die optimalen Transportkosten zwischen zwei Wahrscheinlichkeitsmaßen misst. Diese Distanz ist stetig und eine Konvergenz in der Wasserstein-Distanz ist äquivalent zu einer schwachen Konvergenz im Wassersteinraum. Darüber hinaus ist eine Variante der Wasserstein-Distanz, die Earth-Mover-Distanz, überall stetig und fast überall differenzierbar für die Parameter $\theta$, wenn die Distanz zwischen einer Verteilung $p$ und der Verteilung eines feedforward-Netzes, $p_\theta$, betrachtet wird. Zusätzlich wird in dieser Arbeit die Anwendung der Earth-Mover Distanz in Wasserstein Generative Adversarial Networks (WGANs) beschrieben. Diese Variante der Generative Adversarial Networks (GANs) ist während des Trainings vergleichsweise stabil und ihre Kostenfunktion korreliert stark mit der Qualität der generierten Daten. Diese Arbeit basiert auf dem Buch ‘Optimal Transport, old and new’ von Villani und den Papern ‘NIPS 2016 Tutorial: Generative Adversarial Networks’ von Goodfellow und ‘Wasserstein GAN’ von Arjovsky et al..
Abstract (eng)
This thesis presents the Wasserstein distance which measures the optimal cost of the transport between two probability measures. This distance metrizes the weak convergence in the Wasserstein space and is continuous. Moreover, a Wasserstein variant, called the Earth-Mover distance, is continuous everywhere and differentiable a. e. in parameters $\theta$ when measuring the distance between $p$ and $p_\theta$ for $p_\theta$ being the distribution of a feedforward neural network $g_\theta$. In addition the application of the Earth-Mover distance in Wasserstein Generative Adversarial Networks (WGANs) is shown. This variant of Generative Adversarial Networks (GANs) is comparatively stable throughout its training process and provides a cost which is strongly correlated with the quality of the generated samples. This thesis is mainly based on the book ‘Optimal Transport, old and new’ of Villani and the papers ‘NIPS 2016 Tutorial: Generative Adversarial Networks’ of Goodfellow and ‘Wasserstein GAN’ of Arjovsky et al..
Keywords (eng)
neural networksprobability distanceWasserstein distanceGenerative Adversarial NetworkWasserstein Generative Adversarial NetworkEarth-Mover distance
Keywords (deu)
Neuronale NetzwerkeDistanzen von WahrscheinlichkeitsverteilungenWasserstein DistanzGenerative Adversarial NetworkWasserstein Generative Adversarial NetworkEarth-Mover Distanz
Subject (deu)
Type (deu)
Persistent identifier
https://phaidra.univie.ac.at/o:1350476
rdau:P60550 (deu)
i, 54 Seiten : Diagramme
Number of pages
58
Association (deu)
Members (1)
Title (eng)
The Wasserstein Distance and its Application to Generative Adversarial Networks
Parallel title (deu)
Die Wasserstein Distanz und ihre Anwendung in Generative Adversarial Networks
Author
Alina Franziska Leuchtenberger
Abstract (deu)
In dieser Arbeit geht es um die Wasserstein-Distanz, die die optimalen Transportkosten zwischen zwei Wahrscheinlichkeitsmaßen misst. Diese Distanz ist stetig und eine Konvergenz in der Wasserstein-Distanz ist äquivalent zu einer schwachen Konvergenz im Wassersteinraum. Darüber hinaus ist eine Variante der Wasserstein-Distanz, die Earth-Mover-Distanz, überall stetig und fast überall differenzierbar für die Parameter $\theta$, wenn die Distanz zwischen einer Verteilung $p$ und der Verteilung eines feedforward-Netzes, $p_\theta$, betrachtet wird. Zusätzlich wird in dieser Arbeit die Anwendung der Earth-Mover Distanz in Wasserstein Generative Adversarial Networks (WGANs) beschrieben. Diese Variante der Generative Adversarial Networks (GANs) ist während des Trainings vergleichsweise stabil und ihre Kostenfunktion korreliert stark mit der Qualität der generierten Daten. Diese Arbeit basiert auf dem Buch ‘Optimal Transport, old and new’ von Villani und den Papern ‘NIPS 2016 Tutorial: Generative Adversarial Networks’ von Goodfellow und ‘Wasserstein GAN’ von Arjovsky et al..
Abstract (eng)
This thesis presents the Wasserstein distance which measures the optimal cost of the transport between two probability measures. This distance metrizes the weak convergence in the Wasserstein space and is continuous. Moreover, a Wasserstein variant, called the Earth-Mover distance, is continuous everywhere and differentiable a. e. in parameters $\theta$ when measuring the distance between $p$ and $p_\theta$ for $p_\theta$ being the distribution of a feedforward neural network $g_\theta$. In addition the application of the Earth-Mover distance in Wasserstein Generative Adversarial Networks (WGANs) is shown. This variant of Generative Adversarial Networks (GANs) is comparatively stable throughout its training process and provides a cost which is strongly correlated with the quality of the generated samples. This thesis is mainly based on the book ‘Optimal Transport, old and new’ of Villani and the papers ‘NIPS 2016 Tutorial: Generative Adversarial Networks’ of Goodfellow and ‘Wasserstein GAN’ of Arjovsky et al..
Keywords (eng)
neural networksprobability distanceWasserstein distanceGenerative Adversarial NetworkWasserstein Generative Adversarial NetworkEarth-Mover distance
Keywords (deu)
Neuronale NetzwerkeDistanzen von WahrscheinlichkeitsverteilungenWasserstein DistanzGenerative Adversarial NetworkWasserstein Generative Adversarial NetworkEarth-Mover Distanz
Subject (deu)
Type (deu)
Persistent identifier
https://phaidra.univie.ac.at/o:1350477
Number of pages
58
Association (deu)