docs(review-cards): cal-002校准记录入档——30卡opus盲评金标准+新旧尺子对照数据归档golden/

This commit is contained in:
zizi 2026-07-16 14:34:34 +08:00
parent 2c8683c6c4
commit d26f9e970c
3 changed files with 1236 additions and 1 deletions

View File

@ -31,8 +31,9 @@ description: 公共知识卡三角色审核(番茄作家/起点作家/主编
| 日期 | 批次 | 结果 | | 日期 | 批次 | 结果 |
|---|---|---| |---|---|---|
| 2026-07-13 | cal-00119 卡试拆批) | 平均绝对偏差 **0.45**(合格线 ≤0.5)、平均偏差 -0.08(无系统倾向)、最大背离 1.33<1.58 卡偏差 0.11M3 三角色总评独立复现金标准全部四大系统病同功撞车/命名黑话/伪精确/专名污染)。**已知弱点**场景级走位 vs 可复用范式辨别偏松(《路人搭讪道具借用式情报截流 2.67 M3 4.0)。 | | 2026-07-13 | cal-00119 卡试拆批) | 平均绝对偏差 **0.45**(合格线 ≤0.5)、平均偏差 -0.08(无系统倾向)、最大背离 1.33<1.58 卡偏差 0.11M3 三角色总评独立复现金标准全部四大系统病同功撞车/命名黑话/伪精确/专名污染)。**已知弱点**场景级走位 vs 可复用范式辨别偏松(《路人搭讪道具借用式情报截流 2.67 M3 4.0)。 |
| 2026-07-16 | cal-00230 卡放量终态批,星环/机动跨五型伪随机抽样opus 盲评金标准=`golden/scores-cal002.json` | **背景**批9 全量审核开跑前未复验旧校准(卡形态已经窗级重构+三轮治理大改),创始人叫停纠正。旧尺子实测 MAE 0.489 压线、bias **+0.215 系统性偏松**、判定一致 70%、**金标 revise 被放行 5/14pass 假阳 36%**。**修法**CRITERIA 增评分硬规则伪精确无实测标注→can≤3 / 标签错贴→cheng≤3 / 同功换皮家族仅最佳一张正常分 / 审慎默认拿不准往低打 / 4 分以上须自证)。**复验**MAE **0.326**、bias -0.156(略偏严=安全方向:错杀进 revise 桶可复审救回,假阳进库不可救)、判定一致 77%、放行降至 1 张。教训固化:**卡形态变更后校准必须复验——先校准后放量,不能拿三天前的合格证直接放量**。 |
金标准:`golden/金标准-{番茄作家,起点作家,主编}-2026-07-13.md` + `golden/scores.json`19 卡九维均分)。 金标准:`golden/金标准-{番茄作家,起点作家,主编}-2026-07-13.md` + `golden/scores.json`19 卡九维均分)+ `golden/scores-cal002.json`cal-002 30 卡 opus 盲评)
## 金标准对拆书 prompt 的改进清单B4 优化环的输入,未实施) ## 金标准对拆书 prompt 的改进清单B4 优化环的输入,未实施)

File diff suppressed because it is too large Load Diff

View File

@ -0,0 +1,182 @@
{
"3373": {
"名称": "模糊导航",
"番茄作家": {"分": [4, 3, 3], "判词": "让最强辅助掉链子确实吊得起紧张,但这是氛围小火,撑不起章末大爽点,读者紧两下就过去了。"},
"起点作家": {"分": [3, 3, 3], "判词": "把'读者和角色一起抓瞎'硬标成信息差,标签就错了——信息差要有人知情,这里是集体失明,手法成立标签不成立。"},
"主编": {"分": [4, 3, 3], "判词": "手法能迁移、有异质化要求,可惜装置类型贴反,入库前不纠标签就是给检索埋雷。"}
},
"6067": {
"名称": "身份掩饰对话",
"番茄作家": {"分": [4, 4, 3], "判词": "半真半假让读者当明白人这口优越感很吃香AI拿去写主角搪塞戏能直接上就是对话级爽点撑不了大场面。"},
"起点作家": {"分": [4, 4, 4], "判词": "信息差贴得准、维护成本低、单场景闭环不欠债,失败模式点破'读者必须有收获'是真内行话。"},
"主编": {"分": [4, 4, 4], "判词": "少见的正经货:标签对、能换书、失败模式比手法还值钱,入库不亏。"}
},
"2215": {
"名称": "错身错过钩子",
"番茄作家": {"分": [4, 3, 3], "判词": "错过揪心是有,但番茄读者最烦只擦肩不相遇,用重了直接掉粉,双刃剑。"},
"起点作家": {"分": [4, 3, 3], "判词": "老牌错身桥段,标'非装置'算诚实,可'感情线最多2-3次'是拍脑袋数字,没实测别装精确。"},
"主编": {"分": [4, 3, 3], "判词": "错过流的标准件,能复用但不新鲜,失败模式提醒'要有旁证'还算捞回一点分。"}
},
"1970": {
"名称": "试探饱和开局",
"番茄作家": {"分": [4, 3, 3], "判词": "廉价火力被拦搭绝望感能用,但爽点全靠后面破局,这卡只管起手不管高潮。"},
"起点作家": {"分": [3, 3, 3], "判词": "'加注试探逼底牌'是真结构,可惜和阶梯递进探索同一副骨架,公式里还裹着脉冲波光束炮的原著专名。"},
"主编": {"分": [3, 3, 3], "判词": "战争戏通用起手式,能复用但和另一张探索卡撞车,入库得先去重。"}
},
"2081": {
"名称": "盛典三段启动",
"番茄作家": {"分": [3, 2, 2], "判词": "仪式感对番茄就是水字数重灾区,三段式启动读者划走都不带犹豫。"},
"起点作家": {"分": [3, 2, 2], "判词": "'领誓-齐诵-按机关'谁不会公式里还塞着AI括号注释'魔方'一词直接漏原著,同场景闭环参考价值封顶。"},
"主编": {"分": [3, 2, 2], "判词": "把常识仪式拆三段包装成范式,典型写作课凑数货,进库就是噪声。"}
},
"3550": {
"名称": "借势反杀",
"番茄作家": {"分": [4, 4, 4], "判词": "借装置翻盘,'早埋的枪终于响了'是硬爽点AI写反杀戏拿这个准没错。"},
"起点作家": {"分": [5, 4, 4], "判词": "契诃夫之枪的正经范式——预先可见放置+后续引爆全齐,埋收距离和'装置别太强'的度都点到,本批结构工艺第一。"},
"主编": {"分": [4, 4, 4], "判词": "真范式:可复制、有度、失败模式是干货,放心入库。"}
},
"6449": {
"名称": "瞬间翻脸",
"番茄作家": {"分": [4, 3, 3], "判词": "墙头草见风就跪、内鬼当场翻脸,打脸密度够爽,但全靠前面伏笔喂饭,空手复制不了。"},
"起点作家": {"分": [3, 3, 3], "判词": "'一次性引爆所有伏笔'是收网戏,离开前置埋线这套走位就是空转,是果不是因,维护成本高。"},
"主编": {"分": [3, 3, 3], "判词": "多方翻脸的收束模板能参考,但它得站在一堆前戏上,没铺垫照着写会很假。"}
},
"6401": {
"名称": "阶梯递进探索",
"番茄作家": {"分": [4, 3, 3], "判词": "炮灰试探堆险境恐怖再让主角开窍,紧张够用,就是慢热,番茄开篇嫌它肉。"},
"起点作家": {"分": [4, 3, 3], "判词": "'加注-搅局-时限'把探险写扎实了,可惜和试探饱和开局同源,换个战场皮就是同一套。"},
"主编": {"分": [4, 3, 3], "判词": "险境探索的标准递进式能复用,但和另一张试探卡功能重叠,入库要合并。"}
},
"833": {
"名称": "俯瞰伏击悬念",
"番茄作家": {"分": [4, 3, 3], "判词": "居高临下看悬殊场面再一击翻盘,装逼爽是有,但'伏击'俩字名不副实,其实是俯瞰对峙。"},
"起点作家": {"分": [3, 3, 3], "判词": "压迫延迟爆点是能用的运镜,但更像通用叙事常识,装置含量约等于零。"},
"主编": {"分": [3, 3, 3], "判词": "制高点压迫这套运镜可复用,就是偏常识,命名还把'对峙'写成'伏击',抠标题党。"}
},
"1700": {
"名称": "情绪过山车三连跳",
"番茄作家": {"分": [5, 4, 4], "判词": "希望-绝望-再希望就是番茄留存发动机,'别用内心戏拖'这句提醒太对了,好卡。"},
"起点作家": {"分": [4, 4, 3], "判词": "情绪三翻是通用引擎,克制手法点出'靠外部事态不靠抒情'是内行话,只是偏情绪调度、结构工艺淡。"},
"主编": {"分": [4, 4, 3], "判词": "老引擎写出了新价值,'简短台词代替独白'是可复制干货,入库有用。"}
},
"2754": {
"名称": "孤独回溯触发潜能",
"番茄作家": {"分": [3, 3, 2], "判词": "绝境觉醒是爽的,但这卡把'裹被单少年'原样抄下来,换本书就散架,套路本身谁都会写。"},
"起点作家": {"分": [2, 2, 2], "判词": "摘要就是原文复述,情绪弧硬标'牺牲'可根本没牺牲,这不是范式是剧情截图。"},
"主编": {"分": [2, 2, 1], "判词": "童年孤独触发觉醒是烂大街套路,还夹着原著台词,把一次性妙笔当范式的凑数噪声。"}
},
"1911": {
"名称": "藏密附和",
"番茄作家": {"分": [3, 2, 2], "判词": "闷着愧疚陪人吃饭,这种细腻戏番茄读者最没耐心,憋屈不爽,用处窄。"},
"起点作家": {"分": [3, 3, 3], "判词": "隐秘负罪的反讽是成立的戏眼,可'情绪弧型'栏填了'群体聚餐'这种场景词,明显填错格。"},
"主编": {"分": [3, 2, 2], "判词": "戏是真戏,可太小太文艺,进网文库使用频率极低,边角料。"}
},
"2822": {
"名称": "磨盾待变一击斩心",
"番茄作家": {"分": [4, 3, 3], "判词": "苟着磨盾最后一刀捅核心,反杀是爽的,但和另外两张'以弱博强'卡挤一堆。"},
"起点作家": {"分": [3, 3, 2], "判词": "'磨一点等破绽斩要害'成立,可这批里三张以弱胜强就是同一套换皮,参考价值被稀释。"},
"主编": {"分": [3, 3, 2], "判词": "弱者一击致命的老桥段,和辅助预判、半招截击功能重叠,入库三选一足矣。"}
},
"2213": {
"名称": "辅助预判流",
"番茄作家": {"分": [3, 3, 3], "判词": "辅助开挂预判反打是爽,但本质金手指碾压,读者会嫌廉价,且和磨盾斩心一个功能。"},
"起点作家": {"分": [3, 3, 2], "判词": "预判流成立却被科幻辅助锁死,'头撞操作台'当代价太生硬,还撞另两张卡。"},
"主编": {"分": [3, 2, 2], "判词": "金手指预判流,可复制性尚可但和本批两张打架,指导价值被摊薄。"}
},
"4393": {
"名称": "围攻牵制",
"番茄作家": {"分": [3, 2, 2], "判词": "牵制等援军,本身没反转没爽点,就是给真正救场做垫脚石,卡不值钱。"},
"起点作家": {"分": [3, 2, 2], "判词": "'破不了防就骚扰等援军'是常识,标了'无反转'算诚实,可诚实的废话也是废话。"},
"主编": {"分": [3, 2, 2], "判词": "群殴牵制谁都会写,没有可提炼的独门工艺,入库纯凑数。"}
},
"6918": {
"名称": "将帅黏胶战术",
"番茄作家": {"分": [4, 3, 4], "判词": "'每一刀都是为别人争取时间'的后知后觉挺妙,但偏谋略淡爽,番茄读者可能等不到揭底。"},
"起点作家": {"分": [4, 4, 4], "判词": "缠斗争时间窗+延迟揭示,装置和主线耦合得漂亮,'别事后把意图讲死'是老手才懂的提醒。"},
"主编": {"分": [4, 4, 4], "判词": "谋略卡里的好货:能迁移、失败模式点破'过度解说'的坑,入库增值。"}
},
"5262": {
"名称": "暗中留一手的撩",
"番茄作家": {"分": [4, 4, 4], "判词": "口嫌体正发糖CP粉的多巴胺开关番茄言情线拿去就能用好卡。"},
"起点作家": {"分": [4, 3, 3], "判词": "口嫌体正是真范式,可'间隔不少于10章'这数字哪来的?没实测的编造精确最误导人。"},
"主编": {"分": [4, 3, 3], "判词": "发糖标准件能复用,但硬塞个'10章'假精确,写作课最爱这种唬人数字。"}
},
"4890": {
"名称": "数据狂潮",
"番茄作家": {"分": [4, 4, 4], "判词": "数字滚雪球+路人惊叹,读者最吃这套人气可视化,'要给基线锚点'一句直接点醒,好卡。"},
"起点作家": {"分": [4, 4, 4], "判词": "把抽象人气翻译成数字狂潮,失败模式'没锚点没感觉'是硬干货,能换书能落笔。"},
"主编": {"分": [4, 4, 3], "判词": "可复制的造势手法,就是精华全压在'锚点'那条失败模式上,手法本体略空心。"}
},
"6709": {
"名称": "地狱中走出死神",
"番茄作家": {"分": [4, 4, 4], "判词": "队友死→黑化屠场,爆发爽点拉满,'别频繁黑化、自责别省'的度也点到,拿去即用。"},
"起点作家": {"分": [4, 3, 4], "判词": "黑化+自责回收是完整人物弧,失效风险抓住'自责一笔带过就失真'的关键,通用性强。"},
"主编": {"分": [4, 4, 4], "判词": "常见但写得对的黑化范式,失败模式有指导价值,入库合格。"}
},
"7071": {
"名称": "借壳抛计划",
"番茄作家": {"分": [4, 4, 4], "判词": "当众偷换议题抛大计划,智斗装逼一气呵成,读者爱看'满座懵了',好卡。"},
"起点作家": {"分": [4, 4, 4], "判词": "借A抛B的五段智斗写得工整'抛后无执行回应'这条失效风险是老手才写得出的坑。"},
"主编": {"分": [4, 4, 4], "判词": "谋略戏的好范式,可复制有度、失败模式扎实,入库增值(顺手改掉'适新品类'错字)。"}
},
"5791": {
"名称": "告别含笑死",
"番茄作家": {"分": [4, 4, 4], "判词": "含笑赴死的告别战,催泪核弹,'遗愿要回收'这条太懂了,番茄情感线拿去即用。"},
"起点作家": {"分": [4, 4, 4], "判词": "三段式告别写得有工艺,失效风险抓住'遗愿悬空'的结构病,埋收意识到位。"},
"主编": {"分": [4, 4, 4], "判词": "催泪范式的模范生,失败模式全是干货;'0.5章'那种跨度是建议值别当铁律。"}
},
"5611": {
"名称": "打脸权威秒认怂",
"番茄作家": {"分": [4, 4, 4], "判词": "武力怼脸权威秒跪,无脑爽标配,'可反复薅羊毛'还教你后续怎么用,番茄对口。"},
"起点作家": {"分": [3, 3, 3], "判词": "秒怂爽是爽,但结构含量低,就是个打脸节拍,工艺上没什么可琢磨。"},
"主编": {"分": [3, 4, 3], "判词": "打脸秒怂是网文硬通货,可复制性高但也烂大街,'弹性规则NPC'那句提了点价值。"}
},
"5123": {
"名称": "反派悬赏密会",
"番茄作家": {"分": [3, 2, 2], "判词": "反派开会派任务,读者最爱划走的过场,埋线是埋了,但没爽点撑场。"},
"起点作家": {"分": [3, 3, 3], "判词": "反派密会埋追杀线是标准过场,功能清楚但谁都会写,工艺含量低。"},
"主编": {"分": [3, 3, 2], "判词": "反派埋线会的通用模板,能参考但接近常识,入库价值一般。"}
},
"7052": {
"名称": "亲启决战封神",
"番茄作家": {"分": [3, 3, 3], "判词": "操盘手亲自补刀封神,装逼登顶是爽的,但'一击致命'四个字撑不起一张卡。"},
"起点作家": {"分": [3, 3, 3], "判词": "亲自下场的气场升级能用,'埋操盘手隐患'算个前瞻钩子,但结构太薄。"},
"主编": {"分": [3, 3, 3], "判词": "封神一击的通用节拍,可复制但不厚,属于可有可无的中间货。"}
},
"5268": {
"名称": "情人花枪",
"番茄作家": {"分": [4, 3, 3], "判词": "打情骂俏发糖CP甜宠标配'绝不冷脸收场'提醒得对,能用但不新鲜。"},
"起点作家": {"分": [3, 3, 3], "判词": "耍花枪是通用调情节拍,能落笔,但没什么结构工艺可言,情绪小品。"},
"主编": {"分": [3, 3, 3], "判词": "情侣拌嘴升温的标准件,可复制但烂熟,'别冷场'那句还算指导。"}
},
"6784": {
"名称": "猎手反被刺",
"番茄作家": {"分": [4, 4, 4], "判词": "撩人反被撩、强势女沦陷,这反转读者爱看,'只露外在行为'的手法也对,能用。"},
"起点作家": {"分": [4, 3, 3], "判词": "猎手变猎物的关系反转成立,'冷处理激出真心'的因果清楚,情绪工艺尚可。"},
"主编": {"分": [4, 3, 3], "判词": "追而不得反沦陷是言情老套但好用,克制手法有指导,中上货。"}
},
"6991": {
"名称": "战友殇破茧",
"番茄作家": {"分": [4, 3, 3], "判词": "战火焊死一支队,团魂燃是燃,'眼神蜕变代替嚎哭'挺高级,但比个人爆发慢半拍。"},
"起点作家": {"分": [4, 3, 4], "判词": "'战友之死锻造团魂'的集体弧成立,用眼神微变外化情绪,工艺意识好。"},
"主编": {"分": [4, 3, 3], "判词": "团魂蜕变的通用范式,'集体微变'写法有指导价值,能复用。"}
},
"5484": {
"名称": "兽件硬扛流",
"番茄作家": {"分": [3, 2, 2], "判词": "硬扛十分钟没分胜负还叫停,读者要的是碾压不是拉锯,闷战不讨好。"},
"起点作家": {"分": [3, 2, 2], "判词": "兽件硬扛被机甲改装锁死,还打成平手,作为战斗范式既窄又没落点。"},
"主编": {"分": [3, 2, 2], "判词": "硬扛流太吃机甲设定,普适性差,平局收场更是没指导价值。"}
},
"4887": {
"名称": "半招截击",
"番茄作家": {"分": [4, 3, 3], "判词": "料敌先机半招截断对手大招,装逼爽点,就是得先'熟悉对手招式'这前提有点吃设定。"},
"起点作家": {"分": [4, 4, 3], "判词": "'情报换时机、赌错吃全套'把截击的代价写清了,比同批那两张以弱胜强卡更有嚼头。"},
"主编": {"分": [4, 3, 3], "判词": "半招截击靠'熟悉招式'成立,代价结构清楚,比纯金手指打斗卡有指导价值。"}
},
"6982": {
"名称": "精神共振狂化",
"番茄作家": {"分": [4, 3, 3], "判词": "主帅一吼全队暴走碾压,团战燃点,就是有点开群体挂,爽完记得写后遗症别太廉价。"},
"起点作家": {"分": [3, 3, 3], "判词": "集体狂化是量变质变,'超负荷后遗症'的代价让它不至于纯碾压,但机制偏设定挂。"},
"主编": {"分": [3, 3, 3], "判词": "群体狂化buff的通用打法可复制但廉价代价结构算给它续了口气。"}
}
}