METHODS / 工作到系统

先找清楚问题,
再决定系统怎么做。

5篇20章,从一笔工作逐步走到持续运行。可以顺序读,也可以直接进入今天需要做的决定。

选择机会与建立责任边界

这件事值得做吗?谁对结果负责?

01

从经营问题选择值得推进的机会

企业说“今年要用AI降本”,仍没有给产品团队一个可以设计的任务。成本发生在哪段工作?工作量为何增加?谁承受等待和返工?如果这几个问题没有答案,团队很容易把技术演示当作机会验证。本章要形成一个能投入调查的机会,而不是在会上选定模型。

02

判断可行性与价值是否足以支持投入

机会值得调查,不等于值得建设。一次漂亮输出只证明某个输入能被处理;正式项目还要回答数据能否持续取得、结果能否进入系统、用户是否能核对,以及每次有效完成的总成本。本章形成继续投入的条件与验证顺序。

03

定义任务边界与成功证据

“AI回答成功”不等于业务任务完成。它可能解释了一项政策、生成了草稿、请求了操作,或者真正改变了后台状态。这些结果承担不同责任。本章确定任务边界、合理终态及每种终态的证据,让设计、评测和运营使用同一把尺。

04

让组织接住任务与持续改进责任

一个助手可以由个人做出来,一项稳定业务能力却依赖多人接续。AI产品负责人不能用“业务负责正确性、技术负责系统”结束分工:字段冲突由谁解释?规则失效由谁更新?写入结果未知由谁调查?本章形成能运转的责任安排,不要求新建AI委员会。

理解工作与设计产品

一笔工作怎样完成?产品该改变什么?

05

还原现状工作:找到真正需要改变的环节

运营专员收到供方SUP-08的SKU-017便携杯资料,最终要交给审核者的是一份已保存、字段有来源、未决项清楚的商品草稿。正常材料的容量500 ml、材质PP、黑色、净重120 g有据可查;容量缺单位时应先补资料,净重120/150 g冲突时可以保留空值和冲突,不自动发布。先看到这样的工作成果,才能

06

设计目标流程:让人、模型和软件各担其责

目标流程不是在每个旧步骤旁加一个AI按钮。它应重新回答:哪些工作可以消失,哪些可以提前,哪些必须保留,出现不确定性后由谁继续。把任务交给模型只改变执行者,不自动解决事实缺失、业务授权或结果确认。

07

设计产品交互:让用户理解、控制并接续工作

系统会做任务,不代表用户能用它完成工作。用户还需要找到入口、给出信息、理解正在发生什么、辨别结果、修改错误,并在失败后继续。交互设计应让这些动作成本可见,否则“模型准确率提高”可能只换来更多审阅负担。

08

数据与知识:让任务取得有定义、有权限、够新的事实

“企业有很多数据”与“系统能完成这笔任务”之间,隔着定义、身份、更新和结果解释。客户余额应来自业务系统,补卡规定可能来自版本化制度,当前页面对象由产品提供,会话里的用户说法则是待核实输入。把它们全部塞进知识库,会丢掉各自的权威与时间语义。

把产品落实为系统

事实、模型与工具怎样接成系统?

09

架构:把不确定的判断放在可控制的系统里

用户说“卡没收到”,产品应帮助他查明状态并继续处理。架构的第一件事是决定:什么事实由后台提供,哪些判断允许模型作出,什么动作需要用户确认,发生故障时谁继续工作。先把这笔任务走通,再选择编排框架。

10

模型与上下文:让一次调用拥有恰好够用的信息

模型选型不是比较谁在排行榜第一,而是比较谁在当前信息、工具和时限下完成任务。若模型不知道配送事实,换更强模型也不能可靠回答卡在哪里;若上下文充满旧规则,更大窗口可能让冲突更难定位。先组织输入与输出,再比较模型。

11

检索:把正确的依据交给正确的人

“北辰项目周五能否上线?”的困难不是生成一段回答,而是旧计划、工程更新与安全调查同时谈到北辰,只有部分材料适合当前用户。检索应同时解决相关性、授权、时效和依据完整性;向量相似度只解决其中一部分。

12

工具与集成:让模型建议成为可核对的业务动作

调用API成功不一定意味着业务完成;HTTP超时也不一定意味着业务失败。工具设计应让模型知道可以请求什么,让系统决定谁可以做,让用户知道最终发生了什么。读工具与写工具必须区别处理。

验证并进入真实使用

怎样判断可用,并开始受控试点?

13

评测:把成功定义变成可信的量尺

客服说“已经帮您处理”,并不证明补卡请求已建立;商品文案流畅,也不证明尺寸和成分正确。评测首先决定什么证据足以说明任务完成,然后选择测量方法。读完本章,你应能为一个任务设计可重复的评测包,区分系统失败、样本问题与评分器错误,并判断哪些结果值得进入真实试点。

14

可靠性、安全与可观测性:让失败可以发现和接续

可靠系统不只在正常输入下给出答案,还能在事实不全、依赖故障和用户改变意图时保住业务状态,告诉下一位处理者发生了什么。安全也不能只靠提示词说“不要犯错”。本章的决定是:哪些错误可以重试,哪些必须停止,谁接手,以及留下什么证据才能修复。

15

部署与版本:知道上线的到底是哪套系统

只保存模型名称,无法解释今天客服为什么换了行为。Prompt、业务例程、工具描述、知识快照、权限规则和评分器都可能改变结果。部署的决定是:如何把一个已比较的候选带入真实环境,限制影响范围,并在失败时恢复可用服务。

16

试点与采用:验证系统是否进入真实工作

员工登录过系统,不等于工作改善;客服自动处理率上升,也可能只是更多问题被误记为结束。试点应验证一项具体工作是否更好完成,以及团队能否持续承接它。目标是形成扩大、修改或停止的依据,而不是把演示成功变成全组织推广。

运行、改进与迁移

继续投入、修改,还是退出?

17

运行:让业务任务有人负责到底

上线后最容易遗漏的问题是:接口都正常,用户的工作却没有完成,此时谁接手?模型服务可用、工单已受理、补卡请求已创建,是不同的状态。运行设计要让团队识别这些差别,并能继续处理尚未结束的任务。

18

反馈:先定位错误,再改变系统

用户点了“不满意”,不能直接推出模型需要微调。答复可能用了旧资料、查询了错误客户、工具提交失败、交互让用户误解,甚至评测规则把正确行为判错。反馈的价值在于把一个现象变成可验证的改变。

19

经济、性能与价值:按完整任务算账

模型调用便宜,并不代表业务方案便宜;生成快,并不代表工作完成快。价值评审需要把用户结果、整段工作时间、系统资源和持续维护放在同一任务范围内,随后判断这些改善是否转化为企业结果。

20

迁移、复用与退出:复制机制,重验条件

一次任务成功后,最值得复用的通常是已解释清楚的机制与测试,而不是完整Prompt。另一个部门的任务、事实来源、错误代价和责任边界变化时,同样的界面和模型可能产生完全不同的结果。迁移应从这些差异开始。

跨章节专题

长任务怎样持续运行、吸收新事件并恢复

当任务会跨会话、等待外部结果、接受用户修改或调用有副作用的系统时,单个模型循环已不足以表示工作。需要回答:离开页面后谁保留任务;新事件如何改变已有计划;重启后从哪里继续;哪些结果可以告知用户完成。本专题围绕合成任务合同解释,不要求小型草稿工具先建设平台。

进入专题 →
离线学习与表示设计:什么时候值得改变模型输入、输出或权重

同样是“模型经常做错”,修复位置可能完全不同。模型不知道现在有哪些订单,应修数据获取;不知道“履约完成”对应哪个事件,应修能力说明;能选对动作却写不出复杂配置,可考虑中间表示;大量重复排序任务太贵,才可能值得训练轻量模型。先保存失败输入、工具返回、预期结果和实际结果,再讨论训练,避免用昂贵权重更新掩

进入专题 →
规划与证据:把业务意图接到可计算、可核验的结果

业务人员说“生成下月销售计划”或“帮我找一台能替换的泵”,都不是一个可直接执行的接口请求。前者要把战略意图变成数据分析、计算和待确认假设;后者要把口语需求变成要求,再证明具体商品满足要求。本专题比较这两类任务:模型可以理解与组织工作,但计划数值和产品资格各有外部依据。

进入专题 →
从岗位做法到可运行、可复用的企业能力

有安全入口、可下载插件和模型网关之后,企业仍可能没有一笔能持续完成的工作。这里沿“找任务—做产物—接运行—看复用”补足四个判断。主线先读机会筛选、责任分工、部署及试点;本专题用于检查迁移条件,不要求每个项目建设统一平台。

进入专题 →
检索事实、范例与流程:三种依据怎样进入交付

运营要给“未付款买家”改一条促销通知,分析员要找“上季度处理超过两笔工单且平均处理时间最短的人”。两者都能检索,但前者找写法范例,后者找查询流程与当前业务事实。把三种材料混成一个向量库,会让旧活动优惠或旧季度名单悄悄成为今天的答案。

进入专题 →
模拟评测:环境可重复不等于用户反应可信

准备推出新的商品筛选界面时,可以先测代理是否会操作,也可以让模拟买家比较两个界面。两者回答不同问题:操作能力通过不证明真实买家愿意使用;浏览轨迹像人也不证明新界面会提高加购。本专题用Shopify三篇研究区分环境、用户分布与干预效果,让模拟成为候选筛选工具。

进入专题 →
从工具可见到业务可执行:权限、取证与安全任务

本专题用于三种具体任务:CRM纪要落库、月末对账、商品调价。共同问题是模型会调用工具以后,谁保证对象正确、证据成立和动作获准?第12章先决定合同和状态;第14章决定如何观察失败。这里展开可用于方案评审的反例。

进入专题 →
既有方法卡

仍可通过原链接访问,适合快速回看。

不为 AI 而 AI:No-Go 判据与停止条件

对 AI 焦虑的专业回应是给出「不该做什么」。一套可执行的 No-Go 判据、非 AI 替代表达,以及项目停止条件的写法——把「不为 AI 而 AI」做成结构,不是口号。

工作发现:把一笔真实任务拆成事实地图

工作发现的产出物不是流程图,是事实地图——每个判断的事实源、异常路径、责任人。正常路径谁都会画,异常路径才是发现的本体。

技术阶梯 T0–T4:从最简充分技术起步

规则、集成、RPA、生成式、Agentic 五档技术各有适用条件与失效信号。起步选「最简充分档」,让升级成为被证据推动的动作,而不是被演示推动的冲动。

最小闭环:评测集与成本记账

最小闭环的标准不是「能跑通 demo」,是端到端稳定完成、且成本与失败有账。每成功任务成本、正确拒绝样本、失败分桶——无基线不动手。

受控上线:灰度与回退清单

灰度按风险切、不按流量切;回退路径必须演练过一次才存在。一份可直接进发布评审的灰度与回退清单——回退不是流程图,是演练过的动作。

演进响应四动作:保持 / 简化 / 升级 / 替换

模型每季度都在变强,已上线的系统怎么办?先跑本地评测集,再在「保持、简化、升级、替换」四动作里选一个。演进的第一反应是删复杂度,但自主范围扩大时必须重估错误代价。