先跑一版,怎样才不只是反复重来?
为什么这样整理
为什么不再追求第一版完美
8 月 26 日,数读用“先验”和“后验”区分两件事:开始前凭经验判断,运行后根据结果修正。他做法规资讯分析时,不是先固定一套完美方法,而是让每版都可以找错、比较、更新。当试做成本下降,规划和试验之间的投入也可以调整。[84][85]
只是不停重跑,也可能白忙
这一版到底哪里错?为什么错?下一版有没有变好?没有一份能比较的基准版本,就可能只是换一种错法。后来提出的方法还要求,需求、做法和评测一起逐渐明确,每代留下变化、证据和记录,而不是跑完就覆盖掉。[89]
便宜的是试做,不一定是出错的后果
这套方法适合低成本、看得见问题、还能改回来的试验。模型生成便宜,不代表业务错误便宜。未经验证的产物可以先留在测试环境,或只做小范围试用。“快速试错”不能用来省掉发布责任和必要审批。
原文是项目经验总结,不是所有行业的通用最优策略。高风险、反馈延迟或不可逆任务仍需要事前判断。
还可以继续问
这一轮运行结束后,能得到什么足以改变下一轮决策的新证据?
核对早期整理措辞
群中提出了怎样的方法
8 月 26 日,数读把工作策略概括为从“重先验”转向“更快用后验更新”。先验在这里指开始前的经验与判断,后验指见到真实运行结果后的修正。他用法规资讯分析举例:不追求一开始固定完美方法,而让系统每版都能找错、比较和更新。[84][85]
重要的不只是“先跑”
运行结果必须能回答问题:哪一类输出错了、为什么错、下一版是否真的更好。没有比较基线,重复运行可能只是换一种错法。随后提出的框架还要求让需求、方法与评测逐渐成形,保留每代变化、证据和可追溯记录。[89]
适用的真正前提
这条方法依赖低成本、可观察、可修复的试验。模型生成便宜,不意味着业务错误的后果便宜。可以把未经验证的产物留在测试环境里,也可以先以小范围任务验证判断;不能把“快速试错”解释成绕过发布责任。