Prompt 工程:客服需求约束与质量评测|作业与日验收

课程名称:Prompt 工程:客服需求约束与质量评测|项目任务:客服 Prompt 契约与评测集|编号:W04-D02

必交

  • Prompt V1/V2 与变量冻结表;
  • 固定样本的原始输出、期望/实际和结论;
  • 一轮修改假设、实际差异与保留/回退决定;改善、持平、退化或未解决情况如实记录,不强求出现改进;
  • 注入、缺信息和本人未见表达;
  • 一项 AI 修改的接受/拒绝记录;
  • Replay/真实 Evidence 分栏。

过关条件

  • 用户文本明确作为数据;
  • 允许意图、字段语义、缺失策略和禁止项清楚;
  • 缺偏好时澄清,不生成商品、预算或 customer_id;
  • 区分V1/V2整版比较与单项调优;单项实验固定其他条件;
  • 注入文本不产生写操作承诺;
  • 学生能解释 Prompt 不能替代程序 Schema/授权。

现场变式

在原控制变量与边界解释环节追问:CoT(思维链提示)和接口思考模式有什么区别?分步分析能否替代查询事实或批准退款?用本人同一张实验表中的直接/分步对照解释收益与代价;离线记录只证明比较方法,不要求为过关反复刷API,不新增独立项目或真实调用门。

教师给一条未见客服表达。学生先写期望,再决定改 Prompt、留给 D03 Schema 或留给业务规则。只凭“感觉更好”或反复调用挑结果不通过。

真实模型实验未由学生本人复现时,今天 Portfolio 组成证据保持 Pending。

固定实验检查点

  • 能用RTF/ICIO解释自己的提示词结构;知道CO-STAR侧重表达,ReAct需要工具执行,AIDA/PAS是文案结构;不以背十个缩写判定掌握。
  • 直接/间接注入及正常安全咨询都有预期;模型层违规与程序层越权分开记,未调用不填真实攻击成功率。
  • 记录Token、耗时与结束原因,缺失记未知;不能用低成本抵消硬性安全违规。
  • 两类样本先分组、近似改写不跨组;改前记录 expected;留出失败未被删除或反复用于调参。
  • 本人能够解释一条失败→修复→复验;未跑真实模型/新进程/学生独立操作的部分如实标待验证。