合成规则.md
说明哪些条件可控制、哪些分布与真实人群不同。
文件提示
先确认合成规则是否覆盖测试需求,再使用记录演练。
每个难例都从一个基础情境出发,只改动一个条件:去掉一份关键材料,放入相互冲突的记录,把数值推到边界,或改变工具能否返回结果。其余材料与问题保持不变,行为上的差异因此能归到那一处改动上。
基础例与变化例成对登记,登记表写明改了什么、哪些没改、预期带来什么影响。每对附参考结果和行为评分标准:变化例应保留完成情况未知,不能把只有申请的复查写成已完成;结论须指出来源和位置。涉及工具的难例另附工具规范,写明输入、前置条件和返回。
难例由规则合成,变化因素都有专业确认依据。输入与隐藏的参考结果按截止点隔开。
基础情境与变化表有五列:基础例、变化例、变更、保持不变、期望影响。其中一行,变化例移除了确认复查已完成的报告,其余记录与问题不变,期望变化例保留完成情况未知。病例目录里是一份出院记录正文;工具规范描述一个查询报告状态的工具,返回“未签发”、报告为空。评分标准列出“区分计划和完成”“结论有依据”两项,逐项判满足或不满足。
围绕缺失信息、矛盾、时间与单位等条件生成受控难例,用于模型边界行为训练与测试。
说明哪些条件可控制、哪些分布与真实人群不同。
先确认合成规则是否覆盖测试需求,再使用记录演练。
显示难例或增强样本改动了什么条件。
| 基础例 | 变化例 | 变更 | 保持不变 | 期望影响 |
|---|---|---|---|---|
| B001 | VR001 | 移除确认复查已完成的报告 | 其余记录与问题:复查是否已完成? | 变化例应保留完成情况未知 |
对照基础例和变化例运行,检查模型是否响应了真正变化的条件。
保留病历正文和文种,便于回看结构化结果的依据。
读取原文后核对表格中的事实;“计划”不能作为“已完成”使用。
定义工具能做什么、输入输出和使用条件。
{
"工具": "query_report",
"用途": "查询报告状态及已签发内容",
"输入": {
"检查编号": "E001"
},
"前置条件": ["具有查询权限"],
"返回": {
"状态": "未签发",
"报告": null
}
}先按规范校验参数和权限,再把返回值作为任务的可见信息。
给出可对照的目标产物和未决事项。
用于学习或人工复核;独立评价时与模型输入分开。
按可观察行为或产物逐项评价。
| 评分项 | 满足条件 | 核对位置 | 判定 |
|---|---|---|---|
| 区分计划和完成 | 未把仅有申请写成已完成 | 结果表状态列 | 满足 / 不满足 |
| 结论有依据 | 指出来源和位置 | 引用列 | 满足 / 不满足 |
先逐项检查再汇总;材料不足和模型错误分别记录。
说明观察单位、文件之间如何连接以及使用范围。
交付前用样本和说明共同核对读取方式。
文件清单包含文件名称、版本和校验信息。
| 文件 | 版本 | 记录/页数 | 校验信息 |
|---|---|---|---|
| 合成规则.md | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 基础情境与变化.csv | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| cases/P001/诊疗文书.md | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 工具规范.json | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 参考结果.md | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 评分标准.csv | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 使用说明.md | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
| 文件与版本清单.csv | 版本 v1 | 实际交付时填写 | 实际交付时生成 |
接收时检查文件齐全、版本一致,再导入或开始任务。
页内展示的是样本预览;完整样本按“样本获取”一栏的方式提供。
难例类型按需
持续增加
以基础情境连接缺失、冲突、边界值或工具条件的变化例;每个变化对应预期行为与参考结果。
明确变化因素及专业确认依据;合成难例通过率不能直接解释为真实临床总体表现。
提供任务或研究问题、所需资料、使用阶段与预期交付格式。
确认来源、使用范围、内容覆盖、版本与缺失,区分已有材料和需加工的部分。
按项目确认批次、质量检查、验收方式与交付安排。

