AI论坛 AI论坛 beta

欣 郁 (@user1164) 在 【mac跑zimage】GGUF量化后,原bf16的LoRA如何适配? 中发帖

📌 📄 内容摘要: 欣 郁 (@user1164) 在 【mac跑zimage】GGUF量化后,原bf16的LoRA如何适配? 中发帖 如题,z image的底模是bf16,但mac仅支持gguf的格式量化,那么以bf16为底模的lora该如何在gguf上使用? 我问了gemini: 方法一:先把底模+lora融合,再转化为gguf; 方法二:直接把lora也转化为gguf 我想问一下这两个方法,特别是方法二真的可以吗?我看AI说直接转化即可?? [IMG_9376] PS:zimage真的好用——我是m4 pro 48g,1440*1024+cfg2+一个150m的lora下,可以25s/token出图,现在想问问有无更快的办法
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/1240354/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888