周报是最好试模型的场景:结构固定、有数字、有固定读者。这次拿 20 周的真实周报底稿,用同一套提示词让豆包各写一遍,逐篇按三项评。结果一次能用的 11 篇,占 55%;13 处问题分布在另外 9 篇里,集中在三个短板:数字搬运、栏目自行删减、口吻摆动。
一句话结论
国产模型写周报,文字部分基本可以直接用,数字部分必须逐项对。这次 20 篇里,措辞、逻辑、结构骨架都没问题,出错的 13 处里有 4 处是数字——把上周的数当成这周、单位漏掉、关键指标算错。另外两个短板是它会自行删掉它觉得不重要的栏目,以及口吻在正式与口语之间来回摆。
这篇解决什么问题
关于「AI 能不能写周报」,缺的不是观点,是失败率。知道 20 篇里 11 篇一次能用,和知道 20 篇里 2 篇能用,工作方式完全不同:前者可以把 55% 当草稿直接改,后者必须每篇重写。而要拿到这个数字,测法得做对——同一批素材、同一套提示词、固定判定项,否则测出来的只是「今天心情好不好」。
这次还顺带回答了另一个问题:哪一部分可以放手,哪一部分必须盯。答案是文字放手、数字盯死。这个结论比「能用/不能用」有用得多。
开始前要准备什么
- 20 周的真实周报底稿,含原始数据记录。要真稿,不要现编的样例——编的样例不含真实世界里那些脏数据。
- 一套固定提示词,规定栏目与顺序:本周完成、关键数据、问题与风险、下周计划。
- 三项判定:数字保真(逐个核)、结构完整(四栏齐不齐)、口吻得体(是否适合发给上级)。
- 一条纪律:提示词与素材一一对应,中途不改。改了就分不清是模型的问题还是改稿的问题。
具体怎么做
第一步:固定四栏提示词,20 篇各跑一遍
提示词只写栏目、顺序、字数区间,不写「写得专业些」这种要求——那类要求会掩盖真实水平。这次四栏:本周完成、关键数据、问题与风险、下周计划,每篇 300 到 500 字。20 篇跑下来 80 分钟,平均每篇 4 分钟。
素材给的是原始记录,不是整理好的要点:任务清单、几段聊天记录、几个数据截图转的文字。这样测的才是「它能不能从杂乱材料里提炼」,而不是「它能不能改写一段已经写好的文字」。
这是我这一周的原始工作记录(任务清单、相关聊天片段、数据截图转成的文字)。
请按固定四栏写一份周报,300 到 500 字:
1 本周完成:按任务分组,每组写清做了什么、结果如何
2 关键数据:只放记录里出现的数字,不许推算、不许补全
3 问题与风险:写清卡点和影响,不要粉饰
4 下周计划:每条对应一个可交付的产出要求:四栏必须齐全,一栏都不许省略;数字必须来自我给的记录,记录里没有的就写「数据待补」;不要用「赋能」「抓手」「组合拳」这类词;不要加开头问候与结尾表态。
第二步:三项判定,数字逐个核
三项里只有结构可以一眼看,数字必须逐个核。这次的做法是把原始记录里的关键数字列成一张小表,然后逐篇比对——4 处数字问题全部在这一步暴露:1 处把上周的销售额写成这周、1 处漏了单位(写成 12.6 而非 12.6 万)、2 处把两个指标相加当成一个新指标。
结构问题 6 篇,全是同一种:自作主张删掉「问题与风险」这一栏。问它为什么,理由通常是「记录里没有明显问题」。这就是模型的行为特点——没有素材时倾向于省略,而不是标注「无」。口吻问题 3 篇,出现在材料里含大量口语聊天片段的那几周。
这是我给的原始记录里的关键数字清单,以及 20 篇生成的周报。
请逐篇核数字:
1. 每篇里出现的每个数字,标明是否能在原始记录里找到出处(找到就写第几条,找不到写「无出处」);
2. 找出把旧周期数据当本期用的地方;
3. 找出单位缺失或单位错误的地方(如万元写成元);
4. 找出模型自己算出来的、原始记录里没有的数字,逐个列出并说明它可能是怎么算的。要求:逐篇逐数给结论,不要抽样;不许接受「大致正确」;这一项只核数字,不评价文笔。
第三步:按短板分头补,别用一套办法解决三个问题
三个短板要用三种补法。数字问题靠把关键数字直接写进提示词,并加一句「以下数字之外不许出现任何数字」;栏目缺失靠把四栏写成必须逐栏输出、缺栏注明「无」;口吻问题靠给一段历史周报当样例,让它照着语感写。
这次按三条补完重跑 20 篇,落在及格线的从 11 篇升到 17 篇,剩下的 3 篇问题都出在材料本身缺数据,跟模型无关。这个提升幅度说明一件事:周报场景的瓶颈不在模型能力,在提示词有没有把约束写死。
这三项是我的实测结果:数字错 4 篇、栏目缺失 6 篇、口吻不当 3 篇。
请按短板分别给改法,不要给通用建议:
1 数字:怎么在提示词里锁定数字范围,写出一条可直接用的约束句;
2 栏目:怎么强制四栏齐全、缺内容时怎么让它写「无」而不是删栏;
3 口吻:给一段我的历史周报当样例,说明样例要放几条、放在提示词哪个位置最有效;
4 按这三条改完,预估哪一项改善最明显,说明依据。要求:每条改法都要能直接粘进提示词;不要建议「多试几次」「换个模型」这种无操作性的方案。
实测记录
测试条件:20 周真实周报底稿,同一套四栏提示词,中途不改,每篇 300 到 500 字。生成 80 分钟(平均 4 分钟/篇),判定 45 分钟,合计 125 分钟。
结果:一次通过 11 篇,占 55%。另外 9 篇共 13 处问题——数字错 4 处(旧周期当本期 1、单位缺失 1、两指标相加当新指标 2)、栏目缺失 6 篇(全部是删掉「问题与风险」)、口吻不当 3 篇。按三条补法重跑后及格线从 11 篇升到 17 篇。
最值得记的是「问题与风险」这一栏被删了 6 次。这不是随机错误,是稳定行为:材料里没有明显的坏消息时,它倾向于把这一栏省掉,而不是写「本期无重大风险」。理解了这一点,补法就很直接——把「缺栏必须写无」写进提示词,这一类问题就消失了。
最容易错的 3 个地方
第一,只看文笔就给结论。这次 20 篇的文笔都过关,光读一遍会觉得「基本能用」。真问题全在数字和栏目里,数字错了 4 处,栏目删了 6 次,这些都是读感上察觉不到的。评测项必须写死,不能靠通读印象。
第二,让模型自己算数。20 篇里有 2 处是它把两个指标相加当成了一个新指标,看起来合理,实际没有任何依据。这类错误最难发现,因为它算得对、只是不该算。做法是把关键数字列进提示词,并明写「此外不许出现任何数字」。
第三,用一套办法解决三个问题。数字靠锁范围、栏目靠强制齐全、口吻靠给样例,三件事的补法完全不同。混成一句「写得严谨些」,三项都不会改善。分开补之后,及格线从 11 篇到 17 篇,提升主要来自栏目和数字这两项。
可复用的东西
20 篇样本量:少于 10 篇容易受个别极端案例影响,20 篇能看出稳定行为,比如「问题与风险」栏被删 6 次这种规律。
三项判定:数字保真、结构完整、口吻得体,三项互不替代,尤其数字必须逐个核。
原始记录而非整理稿:素材给原始的,测的才是提炼能力;给整理好的要点,测的只是改写能力。
一句锁死数字:「以下数字之外不许出现任何数字」,直接消掉自算数的问题。
缺栏写「无」:不加这条,模型会稳定删掉没有素材的栏目,这次删了 6 次。
常见问题解答
55% 的一次通过率算好用还是不好用
看用途。当草稿用完全够——11 篇基本改改就能发,剩下 9 篇里多数也只是补一栏。但当终稿用就不行,数字错 4 处是致命问题,把上周销售额写成这周这种错误发出去,比不写更糟。所以结论是文字部分可以放手,数字必须逐项核。
为什么「问题与风险」栏被删了 6 次
这是稳定行为,不是随机错误。材料里没有明显的坏消息时,模型倾向于把这一栏省掉,而不是写「本期无重大风险」。理解了这一点补法就很直接:在提示词里写明四栏必须逐栏输出、缺内容要写「无」,不许省略栏目。加这一条之后这类问题直接消失。
数字为什么要写进提示词里
不写就会自己算。这次 20 篇里有 2 处是它把两个指标相加当成一个新指标,看起来合理,实际没有任何依据——这种错误最难发现,因为它算得对、只是不该算。做法是把关键数字列进提示词,并加一句「此外不许出现任何数字」,从源头掐掉自算数。
换一个模型会不会更好
这次没测其他模型,但从数据看没必要急着换。三个短板的补法都是提示词层的约束(锁数字、强制齐全、给语感样例),补完及格线从 11 篇到 17 篇。剩下的 3 篇问题出在材料本身缺数据,换模型也解决不了。先把手里的提示词改到上限,再考虑换。
本网站的部分内容可能来源于网络或用户投稿,仅供大家学习与参考,如有侵权,请联系客服: hhxmw778 进行删除处理。
本站一切资源不代表本站立场,并不代表本站赞同其观点和对其真实性负责。
教程如引导您添加微信或有另外收费服务,请自行甄别!
如遇充值环节或绑定支付账户或输入支付密码之类的异常步骤,建议停止操作!本站不对操作项目的损失负责!
本站一律禁止以任何方式发布或转载任何违法的相关信息,访客发现任何资源有问题请向站长举报下架
(手机微信用户建议用默认浏览器打开,可体验完整功能)
