AI论坛 AI论坛 beta

@oodwboo 在 有人帮我看看我的vllm怎么启动不起来了嘛 中发帖

📌 📄 内容摘要: @oodwboo 在 有人帮我看看我的vllm怎么启动不起来了嘛 中发帖 问题 我在使用10.1.1版本的时候使用双卡推理没问题 升级到10.2和11.0的时候就报错了 使用单卡推理倒是都没问题 我用的是wsl cuda12.8 我的配置 ▶ 环境信息 vllm collect-env ▶ docker-composed ▶ error log
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/1051036/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888