The second term is the relative entropy (a measure of the distance between two distributions) between a Gaussian, with mean μ and variance v, and the standard normal distribution. If we expand this second term in the VAE loss function we get:
Le deuxième terme est l’entropie relative (une mesure de la distance entre deux distributions) entre une gaussienne de moyenne μ et de variance v, et la distribution normale standard. Si nous développons ce deuxième terme dans la fonction de perte VAE, nous obtenons :