检索事实、范例与流程:三种依据怎样进入交付
本页目录 · 4 个段落
运营要给“未付款买家”改一条促销通知,分析员要找“上季度处理超过两笔工单且平均处理时间最短的人”。两者都能检索,但前者找写法范例,后者找查询流程与当前业务事实。把三种材料混成一个向量库,会让旧活动优惠或旧季度名单悄悄成为今天的答案。
改通知时,检索相似写法而不继承旧活动事实
CRMAgent的目标是营销消息模板,不是CRM查询。论文§3使用同商户、同受众的高低表现模板进行结构诊断;缺少同组优质范例时,按受众、产品品类和优惠属性寻找跨商户参考;没有合适参考时用规则改写。产品与券元数据都缺失会跳过RetrievalAgent。CRMAgent v2
以下是原创任务,不是论文商户样本:原文“您有券,回来看看”,本次活动记录为满200减20、明天23:59截止、仅适用水杯类。运营要一条可审阅草稿。
| 中间产物 | 保存什么 | 反例与修正 |
|---|---|---|
| 本次活动事实 | 受众、门槛、优惠、时间、品类、来源和版本 | 参考文案“无门槛50元”不能覆盖本次满200减20 |
| 原文诊断 | 优惠不明确、行动入口缺失;不是任意新活动建议 | “加紧迫感”不能允许编造“最后3件” |
| 范例与选择理由 | 同组范例或跨商户的品类/券相似性;无参考则标fallback | 向量接近却券型不同,须降为写法参考或不用 |
| 候选草稿 | 如“水杯订单满200减20,券明晚到期;打开购物车查看适用商品” | 是否可用仍须核实际券规则与渠道长度 |
| 审阅记录 | 活动事实保真、受众适合、表达清楚;修改与发送分开 | Judge偏好候选≠发送授权≠真实转化提升 |
论文EvaluateAgent用1/3/5评价受众匹配和营销质量,另作匿名成对比较;BERTScore/chrF检查语义相近。这里可借鉴分量尺,却不能仅靠相似度检查优惠保真。活动门槛、时间和禁止承诺应有字段级断言。论文GPT-4o的偏好与分数不是CTR;没有真实试验时,只能说草稿质量评估。四个角色可以用一个模型的四个确定步骤实现,只有并行、隔离或职责要求值得时再拆Agent。
查业务时,记住流程,不记住上季度答案
CRMWeaver是业务查询训练与记忆研究,不是上述营销系统。论文§3.4/Algorithm1检索相似任务的workflow guideline;相似度够时注入流程,缺少时由较强模型离线求解并形成新指南。更新阶段跑两次,以结果一致性决定是否写入;保存的是高层步骤而非整份轨迹。CRMWeaver v1
原创查询:“Q3处理超过两笔工单、平均处理时间最短的客服是谁?”可复用指南是:确定期间与时区→按负责人聚合→过滤计数→计算平均时长→排序→核对并列与空集。当前结果必须来自当前授权数据。记忆里“冬季2021张某最短”不可直接答本季度。
{
"guideline_id": "DEMO-AGENT-HANDLE-TIME-r1",
"task_family": "aggregate-filter-rank",
"prerequisites": ["current schema", "authorized scope", "time-zone definition"],
"steps": ["filter period", "group by agent", "require count > 2", "compute mean", "rank and check ties"],
"excluded_content": ["customer rows", "previous winning agent"],
"review_status": "human-approved teaching guideline"
}
这是参考设计,不是论文Schema。模型可能两次得到同一错误,故“一致”不等于已核实;企业试点还要用可信fixture、SQL结果和业务定义验收。若处理时长口径从首次响应改为解决耗时,即使任务语义相近也应失效旧指南。流程记忆与身份权限、schema版本共同决定是否可用,不建议复制论文相似度阈值。
该论文同时研究关系图合成跨表问题、SFT和DAPO;数据分析奖励依赖答案精确匹配,QA用F1,格式奖励仅是另一分量。它们在CRMArena/CRMArena-Pro环境中研究,不能称已部署Salesforce业务收益。普通企业可先验证指南检索与只读查询,只有有代表轨迹、可验证奖励、训练维护能力及明显基线差距时才讨论训练。
不同内容需要不同完成证明
当前事实怎样进入答复,见第11章北辰任务的资料、筛选与结果。本专题进一步解释检索写法范例和流程指南时,为什么还要重取当前事实;两者分别承担不同职责。
Finch所示的字段、值及表规则用于解释企业数据语义;Bosch裁剪的是本体/schema,不是普通文档分块。生成一段貌似合理文本不能证明SQL、SPARQL或图表正确。任务交付至少要保留定义版本、查询或计算产物、执行结果及引用。
对通知,验活动字段和未经批准的承诺;对聚合查询,验分母、期间、权限、聚合和并列;对图文报告,验数据来源、代码执行与图表标签。具体图文任务在反馈的图文产物小节展开;查询路线从检索主线进入。判断哪种材料进入上下文后,再选择重排序、记忆或微调,不能仅因都有“检索”就共用一套评分。
参考资料
来源与使用范围
方法综合公开研究与教学推演;参考资料、适用条件和示例边界见正文。
一起判断下一步
带一笔任务,聊一个具体决定。
培训、方案评审或落地辅导,从你的工作材料与当前困难开始。