我在设计一套 prompt 在不同模型里面迁移适配的方案,大概流程是原 prompt -> 中间件 -> 新模型可用的 prompt ,旨在减少迁移模型时的适配工作。
现在需要有原始 prompt 输入并进行验证,用 gemini 和 gpt 生成了几套尝试了一下,发现效果并不稳定。
所以求助大家,如果大家有现在正在稳定使用的 prompt ,可以将在用的模型+prompt 内容分享给我吗?
如果这套方案最终可行,我会再返回一个针对在用模型的新 prompt ,验证一下效果
感谢~
1
YanSeven 1 天前
不同模型的 prompt 还能有区别吗,不都是自然语言吗。
|
2
WongHuang 23 小时 51 分钟前
以我朴实的经验来看:同一套提示词在同一个模型里的使用效果都不稳定,“跨模型适配”更像是一种赛博做法……
|
3
ikooma OP @YanSeven 有区别的,看模型训练时的权重,弱思维链的模型如果规定了操作步骤一般能稳定输出,强思维链的模型如果规定了步骤可能降低模型输出的能力(因为 gpt 这种自己生成的逻辑步骤可能比人写的更完整)。还有一些格式上的表达方式、一些边界限定的写法,都有差别。自然语言可以理解,但不表示完全一样。
@WongHuang 对的这个想法有点赛博,不过个人折腾嘛,我想着试试看。我尝试把原 prompt 的语义提取出来(不是 prompt 文本和结构),然后保存 prompt 里面确定的和不完全确定的信息(毕竟也是用 llm 提取的),再由对应的 llm 进行解读并生成给自己所需要的 prompt 。 |