真实世界数据研究专区 · 数据集
TREC 精准医学评测任务(TREC Precision Medicine Track)
原名:TREC Precision Medicine Track。
概述
TREC Precision Medicine Track 由美国国家标准与技术研究院(NIST)主办,是 Clinical Decision Support Track 的后继。它在 2017—2020 年共举办四届。每个检索主题是一份合成癌症病例,写明癌种、基因变异、人口学与其他情况。2017 年设 30 个主题,文献集含约 26,759,399 篇 MEDLINE 摘要,另有 37,007 篇 ASCO 与 33,018 篇 AACR 会议摘要。当年的临床试验集含 241,006 条,判定文献 22,642 条、试验 13,441 条。
它检验检索系统能否按肿瘤患者的基因变异找到相关治疗文献与可入组的临床试验。主题、相关性判定与评测脚本都公开,研究者可复现历届结果并比较新方法。
对人工智能学习的帮助
检索主题由资深肿瘤学家参照真实病例编写。检索结果由医师研究生与博士后判定相关性,能学到 3.0 专家判断。NIST 公开了 qrels、评测脚本与主指标,能学到 4.0 任务环境。模型可以从中学到从基因变异到治疗证据与临床试验的匹配。主题是合成病例,不能当作真实诊疗记录。每条结果只判一次,没有评分者间一致性,试验状态与地理位置也不纳入判定。
记录形态
| 项目 | 内容 |
|---|---|
| 规模 | 2017 年 30 个主题、241,006 条临床试验、约 26,759,399 篇 MEDLINE 摘要 |
| 记录语言 | 英语 |
| 记录来源 | 合成数据、其他来源 |
| 记录单位 | 合成病例主题 |
| 时间轴 | 单次,每个主题为一份合成癌症病例 |
| 结局 | 无结局字段 |
| 专家标注 | 有,肿瘤学专家编写主题,医师研究生与博士后判定相关性 |
| 任务环境 | 有,提供相关性判定文件与评测脚本 |
样例
表:topics2017.xml(2017 年检索主题)。
| 主题编号 | 癌种 | 基因变异 | 人口学 | 其他情况 |
|---|---|---|---|---|
| 1 | Liposarcoma | CDK4 Amplification | 38-year-old male | GERD |
| 2 | Colon cancer | KRAS (G13D), BRAF (V600E) | 52-year-old male | Type II Diabetes, Hypertension |
| 3 | Meningioma | NF2 (K322), AKT1(E17K) | 45-year-old female | None |
获取
| 项目 | 内容 |
|---|---|
| 商用 | 未列明 |
| 申请 | 公开下载,文档集须到赛道网站下载 |
质量与局限
| 项目 | 内容 |
|---|---|
| 维护方口径 | 主题由肿瘤学专家编写。检索结果池化后按两步流程判定相关性 |
| 已知局限 | 每条结果只判一次,无评分者间一致性。主题为合成病例。试验状态与地理位置不纳入考虑 |
所属话题
- 血液与肿瘤 › 肿瘤病历文本与分子信息
出处
https://trec.nist.gov/data/precmed.html;https://trec.nist.gov/data/precmed2020.html;https://trec.nist.gov/pubs/trec26/papers/Overview-PM.pdf;https://trec.nist.gov/data/precmed2017.html。
审校:数巨有谱真实数据研究团队|编辑:数巨有谱AI团队