五步把一个含糊的客服分诊提示词改到能用
一位 Reddit 用户用本地小模型演示提示词迭代,跟帖补充了更可复用的流程:先收集失败样例,再一次只改一处。
有人把一个模糊的客服分诊提示词录成实操视频,分五步改到输出稳定、能直接使用。客服分诊就是判断工单属于哪类、该转给谁。这类任务看起来简单,边缘情况一多就容易翻车。视频地址:https://youtu.be/ccTB-lQ3uBI ,配套代码在 GitHub:https://github.com/AI-Literacy-Lab/prompt_engineering 。作者说重点放在实际应用,理论讲得少,本地 Ollama 加较小模型也能跑。

原帖发在 r/PromptEngineering,发帖人想看看别人遇到“提示词已经接近可用,但边缘案例仍不稳定”时怎么继续打磨。跟帖里,useleash 给出一套更可复用的做法:
- 先收集失败样例。建一个 20 到 30 条输入的小测试集,把出问题的边缘案例放进去,也保留正常案例,方便发现回归。
- 一次只改一个地方,然后重跑整个测试集。否则无法判断是哪处修改起了作用。
- 加入对比示例。分诊场景里,两条相似但归属不同类别的工单,比堆更多规则更能教会模型边界。
- 给模型一个明确的“unclear”选项。对含糊输入强行分类,很容易得到自信的错误标签。
- 约束输出格式,比如固定标签或 JSON,这样结果可以自动评分,不用靠肉眼扫。
这套流程里最不显眼的是第 2 条和第 5 条。一次只改一处,固定输出格式,让提示词迭代从手感变成可比较的测试。很多提示词在演示里能看,一到边缘案例就不稳,原因常常是缺失败样例和自动评分。小模型尤其如此,短而具体的指令通常比长解释更有效。
发布时间: 2026-11-15 16:43