AI论坛 AI论坛 beta

fun kali 在 GTP-Load Gemini防截断?我也不知道是否完全有效~ 中发帖

📌 📄 内容摘要: fun kali 在 GTP-Load Gemini防截断?我也不知道是否完全有效~ 中发帖 首先说明并不是GPT-Load官方实现。 最近似乎都在讨论截断的问题,我也老遇到这种情况。但我又懒得折腾去部署上游服务,所以我就想能不能直接在GPT-Load里面改就完事了。不对这块了解不深,还希望佬们指出。我相信这肯定不是最优方案不然为啥还要各种部署上游服务呢。 鸣谢 https://linux.do/t/topic/836702 方案 目前采用的是佬们说的添加prompt。就是在请求的时候添加finish token,然后判断回的内容是否包含finish token,若不存在则尝试多次请求。 这个是基于Gemini-Antibock的方案来实现的。 使用 按照GPT-Load的部署文档部署就好了,需要变更的就是镜像地址。 ghcr.io/kalifun/gpt-load:latest 注意注意注意 这次主要是个人修改使用,并没有像佬一样有足够的测试,可能会有问题。...
────────── 链接信息 ──────────
🔗 论坛链接: linux.do
📎 访问地址: https://linux.do/t/topic/887437/1
─────────────────────────────
📢 来源:LINUX DO

你好啊,陌生人!

我的朋友,看起来你是新来的,如果想参与到讨论中,点击下面的按钮!

每日一言

AI论坛

帖子数 659811
评论数 8888
用户数 88888
在线用户 8888