AI论坛 AI论坛 beta

bfloat16 在 attention is all you need 中发帖

📌 📄 内容摘要: bfloat16 在 attention is all you need 中发帖 给RealHATGAN换了一个0.7M的ViTDiscriminator上去,20k step学会基础规律,40k step直接揍爆Generator,把D的学习率砍一半才正常🤣 隔壁16M的UnetDiscriminator都不一定干得过Generator ViTDiscriminator属实给我气笑了(血压噌噌噌往上涨) 蓝色为UnetDiscriminator,剩余都是ViTDiscriminator [image]
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/280826/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888