AI论坛 AI论坛 beta

996 在 【本地部署】测试windows和ubuntu下lmstudio部署qwen3.5-27b的资源占用情况 中发帖

📌 📄 内容摘要: 996 在 【本地部署】测试windows和ubuntu下lmstudio部署qwen3.5-27b的资源占用情况 中发帖 暂时个人玩玩, 条件有限: RTX3090 24G,32G内存。 使用模型:qwen3.5-27b-heretic 量化:4bit 上下文:64000 GPU卸载:100% 测试结果 windows:34token/s,显存占用20-22G左右,内存占用20G左右。 ubuntu:32token/s,显存占用16-20G左右,内存完全空闲。 windows忘了截图,这是ubuntu下正在跑的情况: [image] [image] 比较奇怪的是,在ubuntu下我的内存为啥是空闲的, 在windows下,我的内存几乎占满。 两者速度差不多,虽然ubuntu少那么一点点,但使用的资源少多了
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/1660155/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888