首先我们知道KL散度具有不对称性，一般我们称$D_{KL}(p||q) = \mathbb E_{p(x)} \frac {p(x)} {q(x)}$为正向KL散度，$D_{KL}(q||p) ...