AI论坛 AI论坛 beta

CodeAtlantis 在 AI模型本地运行资源有限,优先选高精度还是大参数 中发帖

📌 📄 内容摘要: CodeAtlantis 在 AI模型本地运行资源有限,优先选高精度还是大参数 中发帖 如题,现在我想在笔记本上部署模型自用,然而资源有限只有12G显存 那么我该选择用ollama下载参数少但精度高(FP16)的模型还是参数大但量化的模型 例如qwen3:8b-q4_K_M 还是qwen3:4b-fp16 请各位大佬赐教
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/742250/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888