作者Activation ('selu')
看板DataScience
标题[问题] GAN的mode collapse问题
时间Fri Aug 17 16:00:10 2018
请问我看GAN的paper他的优化是两个KL divergence相加成一个JSD
那JSD应该是对称的吧?
为什麽GAN仍会有不对称问题要用D2GAN来解决mode collapse?
这里我有点头脑打结,
请教各位大德,谢谢了
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 140.112.16.134
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/DataScience/M.1534492812.A.48D.html
1F:→ yoyololicon: 你说的对称是指什麽东西 08/17 19:12
2F:→ Activation: 对不起没说清楚, 就是P_g跟P_data是对称的 08/17 19:46
3F:→ Activation: KL(P_g|| P_data+P_g) + KL(P_data || P_data+P_g) 08/17 19:48
4F:→ Activation: 这样应该没有篇重P_g或P_data吧? 08/17 20:16
5F:→ Activation: *偏重 08/17 20:17
6F:→ yoyololicon: 呃 那只是式子上是对称 08/18 12:10
7F:→ yoyololicon: 因为model产生的分布和资料的分布本来就不同 08/18 12:11
8F:→ yoyololicon: 在训练的时候因为model的结构大小和训练资料的特性 08/18 12:13
9F:→ yoyololicon: ,两边的力量很难平均 08/18 12:13
10F:→ yoyololicon: 总之gan就是难train,ㄎㄎ 08/18 12:14