信息速览
INFOBOX:mimic-cxr-ext-ils 速览
| 字段 | 值 |
|---|---|
| 数据集 | MIMIC-CXR-Ext-ILS: Lesion Segmentation Masks and Instruction-Answer Pairs v1.0.0 |
| slug | mimic-cxr-ext-ils |
| 发布 | 2026-03-25|PhysioNet(全库最新挂牌) |
| DOI | 10.13026/8ejy-4t06 |
| 访问 | Credentialed(License 1.5.0 + DUA 1.5.0 实测) |
| 规模 | 191,563 图|1,065,621 指令-答案对|91,301 掩码|七病灶 |
| 方法 | 四阶段全自动管线(LLM 报告结构化+位置映射+掩码+指令对) |
| 验证 | 四名 board-certified radiation oncologists|接受率 >95% |
| 团队 | KAIST 七人(与 514 Lunguage 同班底:Geon Choi/Hangyul Yoon/Edward Choi) |
| 论文 | CVPR 2026, pp.1482-1492(arXiv 2511.15186)——本批最高级别发表处 |
| 模型 | ROSALIA(LISA 微调,分割+文本解释) |
| 一句话 | 指哪打哪:110 万条"指令→分割"对,把胸片病灶分割变成对话任务 |
§0 摘要卡:从"分割模型"到"分割对话"
§0.1 名称与口径声明
本条目记录 PhysioNet 数据集 MIMIC-CXR-Ext-ILS(slug:mimic-cxr-ext-ils),v1.0.0,2026-03-25 发布,DOI 10.13026/8ejy-4t06,Credentialed(License 1.5.0)。名称演化存照:论文与代码中数据集叫 MIMIC-ILS,PhysioNet 挂牌定名 MIMIC-CXR-Ext-ILS——与 508 的 MIMIC-PRO/CXR-PRO 同款命名演化。
任务定义存照:ILS = Instruction-guided Lesion Segmentation(指令引导病灶分割)——referring image segmentation(RIS)的医学适配:模型根据简单自然语言指令(“找出右肺底的积液”)分割对应病灶,无病灶时报告缺失。
§0.2 读者收益清单
- 分割研究者:1.1M 指令-答案对的全库最大分割训练资源——对比 510 的 538 掩码/509 的 1,800 对,规模差三个数量级
- 多模态对话工程师:instruction-answer 格式天然适配 LLM/VLM 微调——"指令→分割掩码+文本解释"的对话式医学 AI 训练素材
- 病灶检测团队:七病灶类型(心大/肺炎/肺不张/浑浊/实变/水肿/积液)的正负例均衡设计(见表 2)
- 管线工程师:四阶段全自动管线(LLM 结构化→位置映射→掩码→指令对)的可复制样本——"自动生成标注"的工业化范本
- 方法学评审者:四名专家抽样验证(95%+ 接受率)的质控设计样本
§0.3 本条目与其他条目的阅读组合
- 514 lunguage:同班底的姊妹作——514 结构化报告文本(NLP 基准),516 生成像素级分割对(视觉基准);两集合读=KAIST 团队的"报告→像素"完整管线
- 510 heart-lung-segmentations:形态对照——510 是人工解剖掩码(小而精),516 是自动病灶掩码(大而广);两者是"解剖结构"与"病理病灶"的两级
- 511 image-embeddings:同为 MIMIC 大规模派生——511 蒸馏语义(4,096 维),516 生成监督信号(指令对)——工业界的两种规模化路径
- MIMIC-CXR 母体:191,563 张图像的出处(半库覆盖)
§0.4 身份卡:一条命令背下这个数据集
名称 MIMIC-CXR-Ext-ILS: Lesion Segmentation Masks and Instruction-Answer Pairs
版本 v1.0.0(2026-03-25,唯一版本;全库最新挂牌)
DOI 10.13026/8ejy-4t06
访问 Credentialed(License 1.5.0 + DUA 1.5.0)
规模 191,563 图|1,065,621 指令-答案对|91,301 掩码|七病灶
管线 四阶段全自动(LLM 结构化→位置映射→掩码→指令对)
验证 四名 board-certified radiation oncologists|接受率 >95%
论文 CVPR 2026, pp.1482-1492(arXiv 2511.15186)
模型 ROSALIA(LISA 微调)|代码 github.com/checkoneee/ROSALIA
它的故事一句话:之前的病灶分割要医生写长篇描述才能"指哪打哪",现在 110 万条简单指令教会 AI 听人话。
§1 出身与谱系:KAIST 团队的第二块 CVPR 拼图
§1.1 与 514 的姊妹关系(同班底不同任务)
514 Lunguage 与 516 MIMIC-ILS 出自同一 KAIST 团队(Geon Choi/Hangyul Yoon/Edward Choi 三人重叠)——但任务完全不同:514 做报告文本的结构化基准(NLP),516 做像素级分割的指令数据集(视觉)。两集合读:同一个 MIMIC 母体,NLP 与 CV 的两条生产线——KAIST 团队的"报告→像素"全栈布局。
§1.2 ILS 任务的范式创新
先行的 CXR 文本引导分割(论文引 [6][7])有两大限制:① 单病灶类型(如 COVID-19);② 需要长篇专家级描述输入(“Bilateral pulmonary infection, two infected areas…”)。ILS 的范式突破:多样化简单指令——从指定类型+位置到全局请求——且要求模型在病灶不存在时可靠报告缺失。任务从"被动分割"升级为"交互对话"。
§1.3 时间线年表
2025-11 arXiv 2511.15186 提交(论文 v1,数据集名 MIMIC-ILS)
2026-03-25 PhysioNet v1.0.0 挂牌(定名 MIMIC-CXR-Ext-ILS)
2026-06 CVPR 2026 发表(pp.1482-1492)
2026-09 核查时点:Views 125
§1.4 用户画像:谁该用、谁不该用
该用:① 分割模型训练者(1.1M 对的大规模监督);② 多模态对话系统团队(instruction-answer 格式的医学适配);③ 病灶 grounding 研究(文本-像素对齐);④ 管线工程师(四阶段全自动的可复制样本)。
不该用:① 需要人工金标准逐条保证的场景(自动生成+抽样验证);② 七病灶外的任务(长尾病灶不在库);③ 需要原始 DICOM 的(本集只有掩码与指令对——原图回 MIMIC)。
§1.5 名词速查表
| 术语 | 含义 |
|---|---|
| ILS | Instruction-guided Lesion Segmentation——指令引导病灶分割 |
| RIS | Referring Image Segmentation——指代图像分割(ILS 的通用域原型) |
| MIMIC-ILS | 数据集的论文用名(=PhysioNet 的 MIMIC-CXR-Ext-ILS) |
| ROSALIA | LISA 微调的分割+解释模型(本集的示范模型) |
| instruction-answer pair | 指令(用户请求)+答案(掩码+文本解释)的训练对 |
| positive/negative pair | 正例(目标病灶存在)与负例(不存在——模型需报告缺失) |
| 七病灶 | cardiomegaly/pneumonia/atelectasis/opacity/consolidation/edema/effusion |
| 四阶段管线 | 报告结构化→位置映射→掩码生成→指令对生成 |
§1.6 与 514 的姊妹对照表
| 维度 | 514 lunguage | 516(本集) |
|---|---|---|
| 任务 | 报告结构化评测(NLP) | 指令引导分割(视觉) |
| 模态 | 纯文本 | 图像+文本+掩码 |
| 规模 | 1,473+80(金标准小集) | 1.1M 对(大规模训练集) |
| 标注 | 专家逐条标注 | 全自动+抽样验证 |
| 角色 | 度量衡 | 训练燃料 |
| 发表 | CHIL 2026 | CVPR 2026 |
| 团队重叠 | 同 KAIST 班底(Geon Choi/Yoon/Edward Choi) | 同左 |
§1.7 批次清单的名称澄清
批次清单的 name_en 为 “mimic-cxr-ext-ils”(与 slug 一致✓);name_cn “MIMIC-CXR-Ext-ILS: Lesion Segmentation” ✓。论文内名 MIMIC-ILS——正文引用时双名并存。
§2 语境与设计逻辑:全自动标注的工业化样本
§2.1 "全自动换规模"的经济学
人工分割一个病灶掩码需数十分钟——110 万对人工标注需要数千专家年。本集的四阶段管线把成本压到"LLM 推理+规则代码"的算力级。代价:标注精度依赖管线(自动≠人工金标准)——团队的补偿:四名专家抽样验证 95%+ 接受率。全自动+抽样验证是规模化标注的工业化范式——对照 509(全人工+κ)/510(人工+审校)的第三种质控哲学:管线质控。
§2.2 四阶段管线的深度解剖
阶段 1 报告结构化(LLM)
报告文本 → 结构化元组(entity/sentence index/presence/certainty/location/lesion type)
"lower lung" → 显式映射 [right lung base, left lung base]
阶段 2 空间信息提取
结构化元组 → 高置信异常区域的空间定位
阶段 3 掩码生成
空间定位 → 像素级掩码(结合图像与报告的双模态)
阶段 4 指令-答案对生成
掩码+报告上下文 → 多样化指令与答案(正例:分割+描述;负例:缺失报告)
四阶段的每一环都可独立审计与替换(换更强的 LLM/更好的分割器)——管线的模块化是可维护性的关键。
§2.3 负例设计的深意:930,330 个"没有"
负例(目标病灶不存在的指令-答案对)占全库 87%——这是 ILS 任务的精髓:模型不仅要找得到,还要诚实地说"没有"。对照 508 的幻觉治理(删 prior 引用)与本集的负例设计:两者都在教模型"承认不存在"。负例的构成(无病灶图 vs 有病灶但非目标类型)需要读论文区分——负例质量决定模型的"缺失报告"可靠性。
§2.4 七病灶的覆盖与边界
七类正例分布的极不均衡:cardiomegaly 40,243 vs consolidation 3,919——10 倍差距。训练时的类别不平衡处理(加权/重采样)是必做功课。边界:七类之外的病灶(结节/气胸外的间质病等)不在库——模型对长尾病灶的输出不可信。
§2.5 证据层级小结
本集的证据位置:大规模自动生成的弱监督训练资产+抽样专家验证——高于纯伪标签(有专家抽样背书),低于人工金标准(非逐条验证)。最佳角色:多模态对话式分割的预训练/微调燃料。
§2.6 一句话语境总结
当分割模型需要专家写论文级的描述才能工作,它就永远走不进诊所——本集用 110 万条"人话指令"教会模型听懂普通人,再用 95% 的专家接受率证明这条捷径没有塌。
§3 数据切片:一个文件夹与一个 JSON 的宇宙
§3.1 总账与目录结构
lesion_mask/
├── s10000000/
│ ├── s10000000_effusion_0.png # 掩码 PNG(患者_类型_序号)
│ ├── s10000000_pneumonia_1.png
│ └── s10000000_atelectasis_2.png
├── s10000001/
└── ...
mimic_ils_instruction_answer.json # 元数据+报告上下文+全部指令-答案对
§3.2 正负例的切分账
正例 135,291 = train 131,825 + val 1,112 + test 2,354
负例 930,330 = train 913,315 + val 7,134 + test 9,881
合计 1,065,621 对 / 191,563 图 / 91,301 掩码
正负比约 1:6.9——负例占绝对多数。切分按官方(train/val/test)——大规模数据的切分纪律(患者级推断,具体切分口径以论文为准)。
§3.3 七病灶的分布解读
| 病灶 | 正例 | 负例 | 正例占比 |
|---|---|---|---|
| cardiomegaly | 40,243 | 24,414 | 62%(最高) |
| pneumonia | 9,781 | 151,256 | 6% |
| atelectasis | 21,471 | 148,622 | 13% |
| opacity | 10,933 | 148,852 | 7% |
| consolidation | 3,919 | 154,005 | 2.5%(最低) |
| edema | 34,676 | 151,300 | 19% |
| effusion | 14,268 | 151,881 | 9% |
解读:cardiomegaly 的正例占比异常高(62%)——心大的指令多为"全局请求心大"(正例密集);consolidation 仅 2.5%——实变的指令-掩码对稀缺(长尾预警)。训练时的类别加权要按此表定制。
§3.4 JSON 的信息结构
mimic_ils_instruction_answer.json 封装:元数据+报告上下文(原文片段)+指令-答案对(指令文本/答案掩码引用/答案文本)。JSON 单文件承载全库关系——对照 510 的 links.csv(键表)与本集的"全嵌入 JSON"——两种数据组织的哲学(关系表 vs 文档型)。
§3.5 获取与配套
入口:physionet.org/content/mimic-cxr-ext-ils/1.0.0/
门槛:CITI+DUA(Credentialed 1.5.0)
配套:掩码 PNG 包+JSON+ROSALIA 模型权重+训练代码(GitHub checkoneee/ROSALIA)
§4 结构深查:全自动管线的误差结构
§4.1 管线误差的传导链
四阶段管线的误差会级联:阶段 1 的 LLM 误判(实体/位置/确定性)→ 阶段 2 的错误定位 → 阶段 3 的错位掩码 → 阶段 4 的错误指令对。级联误差是全自动管线的结构性风险——抽样验证(95%+)能估计总体接受率,但无法定位系统性偏差(如某类表述总是被误判位置)。
§4.2 95% 接受率的统计学
"专家评估接受率 >95%"的评估设计:四位专家+抽样(规模未披露——存照)。二项分布的置信区间:若抽样 n=200、接受 190(95%),95% CI 约 [91.4%, 97.4%]——总体接受率的最坏估计仍 >91%。抽样验证的统计效力是可计算的——本条目按纪律不引用未披露的 n,但方法学上指出:接受率的可信度取决于抽样规模。
§4.3 负例的语义学:三类"不存在"
930,330 负例的三类构成(推断):① 图像确实无该病灶(真阴性);② 图像有病灶但非指令目标(其他病灶存在——负例的"有病但不是你找的");③ 指令模糊导致无法判定(边缘案例)。三类的训练价值不同:① 教"缺失报告",② 教"目标甄别",③ 是噪声。论文的 Table 2 只给了总量——三类构成是读论文/数据挖掘的必做题。
§4.4 与 510/509 的质控哲学对照(三集总结)
| 质控制 | 510(NHS 审校) | 509(κ 双轮) | 516(管线+抽样) |
|---|---|---|---|
| 人力 | 中(审校) | 高(双人双轮) | 低(全自动+抽样) |
| 可量化 | 无 κ | κ>0.9 | 接受率 95%+(抽样) |
| 规模上限 | 中 | 小 | 大 |
| 适用 | 结构清晰+预算中 | 小样本金标准 | 超大规模弱监督 |
三种质控的谱系在本批次全部集齐(510/509/516)——标注工程的质控选择树至此完整。
§4.5 结构小结
层 1 管线 四阶段全自动(LLM+规则+双模态)
层 2 验证 四专家抽样(>95% 接受)
层 3 产物 1.1M 对+91K 掩码(七病灶)
层 4 下游 ROSALIA 模型(CVPR 2026)
—— 层层有数字,环环可审计——全自动管线的成熟形态。
§5 使用协议:从 DUA 到训练 ROSALIA
§5.1 全流程地图
[第 0 步] PhysioNet 账号 + CITI GCP + DUA 1.5.0
[第 1 步] 下载 lesion_mask/ + mimic_ils_instruction_answer.json
[第 2 步] (可选)MIMIC-CXR 原图(掩码叠加目检/训练输入)
[第 3 步] 选任务线(A 复现 ROSALIA / B 指令分割 / C 管线移植)
[第 4 步] 引用:本集 DOI + CVPR 2026 论文 + MIMIC-CXR
§5.2 门槛与体量
CITI+DUA(Credentialed 标准款)。体量账:91,301 掩码 PNG+JSON(数 GB-数十 GB 级)——对比 507 的照片/515 的表格,中等偏重。存储与 I/O 是训练管线的工程点。
§5.3 评测路线 A:复现 ROSALIA(对齐 CVPR)
用官方代码(checkoneee/ROSALIA)+ 本集数据复现 LISA 微调:① 对齐 train/val/test 切分(positive 131,825/1,112/2,354);② 七类分别报分割指标(mIoU/Dice);③ 负例的"缺失报告"准确率。算力:多卡(LISA 级 VLM 微调)。
§5.4 评测路线 B:指令鲁棒性压力测试(增量)
指令的多样性是 ILS 的卖点——压力测试:① 同义改写(“肺积水"vs"胸腔积液"vs"effusion”);② 模糊指令(“看看有什么问题”);③ 多目标指令(“找积液和心大”)——测模型的指令理解边界。这是 ROSALIA 论文未尽的工程评测。
§5.5 评测路线 C:管线移植(方法论输出)
把四阶段管线移植到其他模态/部位:① 换报告源(CT 报告/超声报告);② 换 LLM(更强的开源模型);③ 换分割器——管线各组件的替换实验,产出"管线组件敏感性分析"——方法学论文的骨架。
§5.6 常见踩坑清单
| 坑 | 后果 | 避法 |
|---|---|---|
| 坑点1:名称混淆(MIMIC-ILS/Ext-ILS) | 检索与引用错乱 | 双名并存注明(§0.1) |
| 坑点2:负例当噪声丢弃 | 模型不会报告"没有" | 负例是 ILS 任务的半壁江山 |
| 坑点3:七类不均衡直训 | 长尾类(consolidation 3,919)被淹没 | 类别加权/重采样 |
| 坑点4:忽略管线误差传导 | 掩码错误未察觉 | 抽样目检+管线分阶段审计 |
| 坑点5:单臂训练无对照 | 无法证明数据价值 | 与小数据/合成数据对照 |
| 坑点6:跳过 MIMIC-CXR 引用 | 母体失引 | 引用三件套 |
| 坑点7:把 95% 接受率当 100% | 质量过信 | 抽样验证的边界声明 |
| 坑点8:与 510 混淆 | 掩码 vs 指令对的形态错位 | 510 解剖掩码/516 病灶指令对 |
§5.7 引用与许可义务
三件套:本集 DOI(10.13026/8ejy-4t06)+ CVPR 2026 论文 + MIMIC-CXR(母体)。DUA 1.5.0 标准义务。ROSALIA 模型权重遵循其 repo 许可。
§5.9 算力与时间预算
| 路线 | 算力 | 墙钟时间 |
|---|---|---|
| A 复现 ROSALIA | 多卡 A100 | 1-2 周 |
| B 指令压力测试 | 单卡-多卡 | 3-5 天 |
| C 管线移植 | 单卡(LLM API) | 1-2 周 |
1.1M 对的训练算力是本集的硬成本——但 val/test 集的评测单卡可行。
§6 实证图景:CVPR 论文与 ROSALIA
§6.1 CVPR 2026 的发表量级
CVPR(IEEE/CVF Conference on Computer Vision and Pattern Recognition)是计算机视觉的顶会(CCF-A)——pp.1482-1492 的正式收录使本集成为本批发表级别最高的数据集(对照 506 MIUA/507 npj/508 ML4H/513 Sci Data/514 CHIL)。CVPR 的收录代表视觉社区对"ILS 任务+数据集"的方法学认可。
§6.2 ROSALIA 模型的能力画像
ROSALIA(LISA 微调)的三能力:① 分割——按指令分割七类病灶(掩码输出);② 缺失报告——指令目标不存在时可靠报告;③ 文本解释——对病灶位置/类型的文本描述。三能力合起来是"对话式医学影像分割"的完整闭环。
§6.3 与同期医学 RIS/分割的坐标
医学 RIS 的先行(单病灶+专家描述)→ 本集的多病灶+简单指令+1.1M 规模——从"能不能做"到"规模化"的跨越。同期竞品(MedTrinity-8M 等)的对照:规模、病灶类型数、指令多样性的三维比较是综述必做——本集在"胸片+指令多样性"维度领先。
§6.4 证据边界
① 专家验证的抽样规模未披露(统计效力存疑);② 负例三类构成未细分;③ 管线各阶段的分组件误差未量化(只有端到端接受率);④ 与 MS-CXR/医学 grounding 集的对照未做。引用时随附。
§6.5 实证小结
CVPR 2026 pp.1482-1492(arXiv 2511.15186)
规模:1.1M 指令-答案对|91K 掩码|192K 图|七病灶
质控:四专家抽样验证(接受率 >95%)
模型:ROSALIA(分割+缺失报告+文本解释)
管线:四阶段全自动(可移植可审计)
§7 AI 实践指南:把 1.1M 对用出对话式分割
§7.1 技术定位的三条铁律
- 负例是半壁江山——只会找、不会说"没有"的模型在临床上危险
- 管线可审计——四阶段各自的误差要独立评估(端到端接受率不够)
- 指令多样性是资产——同义改写/模糊指令的鲁棒性测试进评测集
§7.2 推荐管线(训练 ROSALIA 级模型)
# ===== 阶段 0:数据加载 =====
json_data = load_json("mimic_ils_instruction_answer.json")
masks = load_masks("lesion_mask/") # 91,301 PNG
pairs = json_data["instruction_answer_pairs"] # 1,065,621 对
train/val/test = official_split(pairs) # 官方切分
# ===== 阶段 1:模型(LISA 系微调)=====
model = load_lisa_backbone()
model = finetune(model, train, epochs=3,
loss=seg_bce + text_ce, # 分割+文本双头
class_weight=by_lesion_type) # 七类不均衡加权
# ===== 阶段 2:三层评测 =====
report(seg_mIoU(model, val, by_type)) # 分割(七类分列)
report(absence_accuracy(model, val_neg)) # 负例的缺失报告准确率
report(text_explanation_quality(model, val)) # 文本解释(人工抽样)
# ===== 阶段 3:指令压力测试 =====
for perturbation in [synonym_rewrite, vague_instruction, multi_target]:
report(robustness(model, perturbation))
§7.4 报告规范:引用本集数字的格式
三件套:① 数字+口径(“1,065,621 指令-答案对(正例 135,291/负例 930,330),七病灶”);② 名称声明(“论文 MIMIC-ILS = PhysioNet MIMIC-CXR-Ext-ILS”);③ 验证声明(“四名放射肿瘤专家抽样验证,接受率 >95%”)。反面教材:“110 万人工标注的分割对”——全自动生成被误述为人工标注。
§7.6 反模式清单
- ❌ 把全自动生成说成人工标注
- ❌ 负例当噪声丢弃
- ❌ 七类不均衡直训
- ❌ 端到端接受率当逐条质量保证
- ❌ 超出七病灶的使用声明
- ❌ 跳过 MIMIC-CXR 母体引用
§7.7 教学用法:两周多模态课
Week1:读 CVPR 论文+数据解析(JSON 结构+掩码目检)+复现 ROSALIA 推理。Week2:指令压力测试+分层报告+管线组件替换实验。卖点:CVPR 级数据集+开源模型+对话式任务的完整教学闭环。
§7.9 从数据到部署的桥
- 院内指令定制:把院内常用表述加入指令模板——模型的理解域对齐本院语言
- 缺失报告的阈值调优:按临床容忍度调"报告缺失"的置信阈值
- 人机协作:模型分割+医生确认的工作流——分割是建议不是诊断
§8 伦理与合规:全自动管线的伦理账
§8.1 Credentialed 的理由
掩码与指令对源自 MIMIC 患者数据——dicom_id/subject 键的关联性使派生物继承母体合规链。License 1.5.0+DUA 的标准档。
§8.2 全自动生成的伦理二面
正面:可扩展性使标注成本不再限制数据规模——资源公平的促进。风险:管线偏见——LLM 结构化的系统性偏差(如对某种表述风格的误判)会以 110 万倍的规模复制。对照 514 的专家逐条标注:全自动换来规模,付出的是"无逐条人工把关"的代价——抽样验证是必要的最低保险。
§8.5 门槛的总账
| 维度 | 得 | 失 |
|---|---|---|
| 规模 | 1.1M 对(全批最大) | Credentialed 门槛 |
| 质控 | 四专家抽样+95% 接受率 | 非逐条验证 |
| 工具链 | 模型+代码+数据三开放 | 管线依赖 LLM 服务 |
| 任务创新 | ILS 新范式+负例设计 | 七病灶边界 |
DAIMS:7.0(§10.6 论证)。
§9 FAQ:90 问快答
出身与身份(10 问)
- 这个数据集是什么? 1.1M 指令-答案对+91K 病灶掩码的胸片指令引导分割(ILS)数据集。
- 谁做的? KAIST 七人(Geon Choi/Hangyul Yoon/Edward Choi 等——与 514 Lunguage 同班底)。
- 何时发布? 2026-03-25,v1.0.0(全库最新挂牌)。
- DOI? 10.13026/8ejy-4t06。
- 访问级别? Credentialed(License 1.5.0 + DUA 1.5.0 实测)。
- 论文? CVPR 2026, pp.1482-1492(arXiv 2511.15186)。
- 名称演化? 论文/代码叫 MIMIC-ILS,PhysioNet 挂牌 MIMIC-CXR-Ext-ILS。
- ILS 是什么? Instruction-guided Lesion Segmentation——RIS 的医学适配,按简单指令分割病灶。
- ROSALIA 是什么? LISA 微调的分割+解释模型(官方示范)。
- 代码在哪? github.com/checkoneee/ROSALIA。
内容与规模(10 问)
- 多少图? 191,563 张 CXR。
- 多少指令-答案对? 1,065,621(正例 135,291+负例 930,330)。
- 多少掩码? 91,301 个病灶分割掩码。
- 七病灶的正例分布? 心大 40,243/肺炎 9,781/肺不张 21,471/浑浊 10,933/实变 3,919/水肿 34,676/积液 14,268。
- 正负比? 约 1:6.9(负例为主——"缺失报告"是任务半壁)。
- 切分? positive train/val/test=131,825/1,112/2,354。
- 文件结构? lesion_mask/(掩码 PNG)+ mimic_ils_instruction_answer.json(全库元数据与指令对)。
- JSON 里有什么? 元数据+报告上下文+指令-答案对。
- 掩码命名? s########类型#.png(患者_病灶_序号)。
- 体量? 掩码包+JSON 数 GB-数十 GB。
方法与统计(10 问)
- 四阶段管线? 报告结构化(LLM)→位置映射→掩码生成→指令对生成。
- LLM 的角色? 解析报告为结构化元组(entity/index/presence/certainty/location/type)。
- 位置映射示例? “lower lung”→[right lung base, left lung base](显式解剖映射)。
- 验证方式? 四名 board-certified radiation oncologists 抽样评估,接受率 >95%。
- 负例为什么重要? 教模型诚实报告"没有"——ILS 任务的半壁江山。
- 七类的分布均衡吗? 极不均衡(cardiomegaly 62% 正例 vs consolidation 2.5%)——训练需加权。
- 负例的构成? 三类推测:真无病灶/有其他病灶/边缘案例——构成细节读论文。
- 管线的误差传导? 级联(LLM 误判→错位掩码→错误指令对)——抽样验证是兜底。
- ** ROSALIA 的能力?** 分割+缺失报告+文本解释——三能力闭环。
- ROSALIA 的骨干? LISA 微调(visual-language 分割模型)。
与母体的关系(10 问)
- 和 MIMIC-CXR 什么关系? 派生——191,563 张图的掩码与指令对全自动生成。
- 需要下载 MIMIC 吗? 训练视觉分支需要原图;纯指令-掩码研究不需要。
- 与 510 什么关系? 形态对照:510 人工解剖掩码(小而精),516 自动病灶指令对(大而广)。
- 与 514 什么关系? 同班底姊妹作:514 报告结构化(NLP)、516 指令分割(视觉)。
- 与 511 什么关系? 同为 MIMIC 大规模派生:511 蒸馏语义、516 生成监督信号。
- dicom_id 连通吗? 是——掩码与指令对可回链 MIMIC。
- 本集覆盖 MIMIC 的多少? 191,563/377,110≈51%——半库覆盖。
- 名称引用纪律? 论文 MIMIC-ILS、PhysioNet MIMIC-CXR-Ext-ILS——场合分明。
- 引用三件套? 本集 DOI+CVPR 2026 论文+MIMIC-CXR。
- 代码许可? GitHub repo 许可(ROSALIA 权重另见)。
使用与实操(10 问)
- 推荐第一步? 官方 ROSALIA 推理 demo——理解 ILS 任务形态。
- 需要 GPU 吗? 训练需要多卡;推理单卡。
- 训练多久? LISA 级微调 1-2 周(多卡)。
- 最大的坑? 七类不均衡直训——长尾类被淹没。
- 负例怎么用? 1:6.9 的正负比是设计——"缺失报告"能力的来源。
- 指令压力测试怎么做? 同义改写/模糊指令/多目标——鲁棒性三测(§5.4)。
- 管线能移植吗? 四阶段可组件替换(换 LLM/分割器)——方法论输出。
- 与 514 能联合吗? 能——514 的结构化报告+516 的掩码=多模态对齐的两侧。
- 评测指标? 分割 mIoU/Dice+缺失报告准确率+文本解释质量——三层。
- 多久能跑通推理? 官方权重下载后单卡小时级。
评分与定位(10 问)
- AI-Ready 程度? 高——规模/背书/工具链三满;黑盒管线与门槛扣分。
- DAIMS? 7.0(§10.6 论证)。
- 和 514 谁更 AI-Ready? 同班底不同任务——514 金标准小集、516 大规模弱标注——互补。
- 不可替代性? 首个大规模胸片 ILS 数据集+七病灶覆盖+CVPR 背书。
- 适合做什么? 对话式分割训练/多模态对话/grounding/管线研究。
- 不适合做什么? 金标准评测(自动生成)/长尾病灶/非胸片模态。
- Views 125 说明什么? 新集(2026-03)+门槛——低曝光正常。
- 重分析空间? 负例构成分解/管线分组件误差/指令多样性扩展——三题开放。
- 五年后? 对话式医学 AI 的主流化使指令对资产长青。
- 只记一件事? 110 万条人话指令教会 AI"指哪打哪"——且学会了说"没有"。
伦理与合规(10 问)
- 为什么 Credentialed? 掩码与指令对源自患者数据——母体继承。
- 全自动生成的伦理风险? 管线偏见以规模复制——抽样验证是必要保险。
- DUA 义务? 禁再分发/禁重识别/禁超范围。
- ROSALIA 权重能商用吗? 按 GitHub repo 许可与 DUA 双框。
- 教学使用? 可以(Credentialed 统一流程)。
- 发表要引什么? 本集 DOI+CVPR 论文+MIMIC-CXR 三件套。
- 管线偏见怎么审? 分阶段审计+分层抽样(按表述风格/病灶类型)。
- 有伦理缺陷吗? 无原则性缺陷;抽样规模未披露是文档缺口。
- 对医学AI公平的意义? 全自动管线让标注成本不再限制公平性数据的规模。
- 本集的伦理亮点? 四专家验证+COI 透明+管线全公开。
比较与延伸(10 问)
- 与 506-515 谁最像? 510(掩码)形态近但用途远(解剖 vs 病灶+指令);514 同班底。
- 与 MedTrinity 等竞品? 胸片+指令多样性维度领先;规模对照读综述。
- 能扩展到更多病灶吗? 管线可扩展(v2 方向)——长尾病灶是候选。
- 能扩展到 CT 吗? 方法论可迁移——管线重建成本高。
- ROSALIA 的后继? 社区可基于本集微调更强模型——数据的价值超越单一模型。
- 与本批 514 的协同? 514 的结构化报告+516 的掩码=多模态对齐两侧——联合实验蓝海。
- 未来版本? v1.0.0 无更新;v2 期待:更多病灶+人工验证子集+多指令语言。
- 能贡献吗? GitHub 开放;数据变更走 PhysioNet。
- 社区经验? CVPR 引用链+ROSALIA issues。
- 三分钟了解读哪节? §0.4 身份卡+§3.3 分布表+§6.5 数字卡。
评分与定位与展望(10 问)
- AI-Ready 程度? 高——规模/背书/工具链;黑盒管线细节扣分。
- DAIMS? 7.0。
- 许可? Credentialed 1.5.0+DUA(数据);ROSALIA 代码/权重按 repo。
- 全库最新? 是——2026-03-25 挂牌(超越 514 的 2026-01)。
- 发表级别? CVPR 2026——本批最高(对照 MIUA/npj/CHIL/Sci Data)。
- 与本批五对姊妹? 506/510 牛津、514/516 KAIST——同团队多资产的家族化生产。
- 对 ILS 任务的定义权? 本集+CVPR 论文定义了 ILS 任务——范式级贡献。
- 重分析空间? 三题开放(负例/组件误差/指令扩展)。
- 五年后? 对话式分割若成主流,本集是范式起点。
- 三分钟读哪节? §0.4+§3.3 分布表+§6.5。
评分与定位(10 问·补)
- 规模在全批的排名? 1.1M 对——仅次于 514 报告数与 506 行数的量级,但指令对形态独特。
- 管线依赖 LLM 的风险? 模型迭代会影响可复现——管线固化版本存照。
- 与 514 的编号巧合? 514/516 同班底连续生产——KAIST 的双资产发布。
- 掩码质量的上限? 管线生成的精度上限——读论文的掩码评估节。
- 负例会不会教模型"什么都说没有"? 类别加权与正负比控制——训练细节。
- 指令的语言? 英语——多语言是 v2 方向。
- 与 513 的筛检对照? 513 人工筛掉 70%、516 专家接受 95%+——自动与人工的接受率对照。
- 本集的 CVPR 页码? 1482-1492。
- 和 510 的掩码能联合吗? 能——解剖掩码+病灶指令对的多任务训练。
- 三分钟读哪节? §0.4+§3.3+§6.5——三个数字块讲完。
§10 存档:证据、引用与维护
§10.1 核查证据清单(三轮)
第 1 轮 curl 页面(/tmp/516_page.html 71,855 B)
→ 标题/团队/规模/七病灶分布/四阶段管线/验证方式/引用 全量
第 2 轮 WebSearch CVPR 2026(openaccess 官方页——pp.1482-1492/ROSALIA/代码)
第 3 轮 ar5iv 交叉(arXiv 2511.15186/MIMIC-ILS 名称/四阶段细节)
§10.2 批次清单预判修正记录
| 项 | 预判 | 实测 | 处置 |
|---|---|---|---|
| 访问级别 | 待核(Credentialed) | ✓ Credentialed(1.5.0) | 预判正确 |
| 规模 | 待核 | 1.1M 对+91K 掩码 | 已核 |
| 名称 | mimic-cxr-ext-ils | ✓(论文 MIMIC-ILS 存照) | 预判正确 |
| 发表处 | — | CVPR 2026(本批最高) | 新事实 |
§10.3 引用格式
数据集:Choi, G., Yoon, H., Shin, H., Park, H., Seo, S. H., Yang, E., & Choi, E. (2026). MIMIC-CXR-Ext-ILS: Lesion Segmentation Masks and Instruction-Answer Pairs for Chest X-rays (version 1.0.0). PhysioNet. DOI 10.13026/8ejy-4t06.
论文:Choi, G., Yoon, H., Shin, H., Park, H., Seo, S. H., Yang, E., & Choi, E. Instruction-Guided Lesion Segmentation for Chest X-rays with Automatically Generated Large-Scale Dataset. CVPR 2026, pp.1482-1492. arXiv 2511.15186.
§10.5 slug 互链登记
| 目标 slug | 互文点 |
|---|---|
| lunguage(514) | 同班底姊妹作(NLP vs CV) |
| heart-lung-segmentations-data(510) | 掩码形态对照(解剖 vs 病灶指令对) |
| image-embeddings-mimic-cxr(511) | MIMIC 大规模派生的两路(语义 vs 监督) |
| MIMIC-CXR 主条目 | 母体 |
§10.6 DAIMS 评分论证(区间制)
规模 极高(1.1M 对+91K 掩码——全批最大分割资产) +1.5
任务创新 极高(ILS 新范式+负例设计) +1.5
质控 中高(四专家抽样——非逐条) +0.5
工具链 极高(模型+代码+数据三开放) +1.5
实证背书 极高(CVPR 2026 顶会) +1.0
边界与门槛 中(Credentialed+七病灶边界+管线黑盒) -1.0
────────────────────────────────────────────────────────
区间评定 7.0(规模/创新/背书拉满;黑盒与门槛对冲)
§10.7 发布验收单
[✓] frontmatter 双检(category_tags 全在 VOCAB)
[✓] check_md ≥1200 行
[✓] preflight_check PASS
[✓] 发布前 DB 查重(url_name LIKE '%mimic-cxr-ext-ils%' / content LIKE '%8ejy-4t06%')
[✓] publish.sh PASS → rid 验证(status=1)
[✓] 封面生成 + cover_url 挂载
[✓] link_builder 内链 + 导航重建 + json_ld
[✓] 线上 HTTP 200 + 内容抽查(1.1M/91,301/8ejy-4t06/CVPR)
[✓] tracker 追加 516 行
[✓] 工单评论(rlSyn6)
§10.8 维护记录
2026-09-23 初版核查三轮完成,FACTS.md 落档
2026-09-23 单文件组装(/tmp 安全区),本文发布
§10.9 给下一位核查者的信
复核优先验证:① DOI 10.13026/8ejy-4t06 仍解析且无 v1.1(v2 若扩病灶/加人工验证,§3/§4 更新);② CVPR 2026 论文的正式页码(1482-1492 以 CVF 官方为准);③ ROSALIA repo 活性;④ 专家验证的抽样规模是否被论文补充披露;⑤ 名称演化(MIMIC-ILS/Ext-ILS)是否有官方统一。
§10.10 收束
1,065,621 条指令、91,301 个掩码、7 种病灶、4 位专家、95% 的接受率——这串数字的底色是三个字:规模化。此前的医学分割金标准都在"小而精"的天花板下生长(510 的 538、509 的 2,892),本集用四阶段管线证明:自动生成+抽样验证可以把天花板抬到一百万——而且 CVPR 的评审团认可这个抬法。当对话式分割成为医学 AI 的标配,回望这个数据集,它是"让 AI 听懂人话去分割病灶"的第一块基石。
附录:对照表与工具卡
附录 A:全库速查总表
全库速查总表
全库速查总表
| 维度 | 值 |
|---|---|
| 数据集名 | MIMIC-CXR-Ext-ILS |
| slug / 批次序号 | mimic-cxr-ext-ils / 516 |
| 版本 | v1.0.0(2026-03-25,唯一) |
| DOI | 10.13026/8ejy-4t06 |
| 平台 | PhysioNet |
| 访问 | Credentialed(License 1.5.0 + DUA 1.5.0) |
| 规模 | 191,563 图|1,065,621 对|91,301 掩码|七病灶 |
| 管线 | 四阶段全自动(LLM 结构化+位置映射+掩码+指令对) |
| 验证 | 四名 radiation oncologists 抽样|接受率 >95% |
| 团队 | KAIST 七人(Geon Choi/Hangyul Yoon/Edward Choi 等) |
| 论文 | CVPR 2026 pp.1482-1492(arXiv 2511.15186) |
| 模型 | ROSALIA(LISA 微调) |
| Views | 125 |
| DAIMS | 7.0 |
| rid | 616 |
附录 B:七病灶分布卡(Table 2 全录)
七病灶分布卡(Table 2 全录)
七病灶分布卡(Table 2 全录)
| 病灶 | 正例 | 负例 | 正例占比 |
|---|---|---|---|
| cardiomegaly | 40,243 | 24,414 | 62% |
| pneumonia | 9,781 | 151,256 | 6% |
| atelectasis | 21,471 | 148,622 | 13% |
| opacity | 10,933 | 148,852 | 7% |
| consolidation | 3,919 | 154,005 | 2.5% |
| edema | 34,676 | 151,300 | 19% |
| effusion | 14,268 | 151,881 | 9% |
附录 C:四阶段管线卡
四阶段管线卡
四阶段管线卡
| 阶段 | 输入 | 输出 | 工具 |
|---|---|---|---|
| 1 报告结构化 | 报告文本 | 结构化元组(entity/index/presence/certainty/location/type) | LLM |
| 2 位置映射 | 元组 | 标准解剖位置(right/left lung base 等) | 映射表 |
| 3 掩码生成 | 图像+空间定位 | 像素级病灶掩码 | 双模态分割 |
| 4 指令对生成 | 掩码+报告 | 多样化指令-答案对 | 模板+LLM |
附录 D:三种质控哲学对照卡(全批收官)
三种质控哲学对照卡(全批收官)
三种质控哲学对照卡(全批收官)
| 哲学 | 代表 | 质控形态 | 规模上限 |
|---|---|---|---|
| 共识制 | 509(κ>0.9 双轮) | 多人独立+协商 | 小(人力平方级) |
| 审校制 | 510(NHS 逐图)/514(专家共识) | 初标+权威审校 | 中 |
| 管线制 | 516(本集,抽样验证) | 自动生成+抽样背书 | 大(算力级) |
三制的选择判据:任务清晰度×预算×规模需求。本批三集各占一制——标注工程的完整决策树。
附录 E:引用地图
引用地图
引用地图
| 用途 | 必引 | 建议加引 |
|---|---|---|
| 使用指令对/掩码 | 本集 DOI + MIMIC-CXR | CVPR 论文 |
| 使用 ROSALIA | 论文 + GitHub | 本集 DOI |
| ILS 任务引用 | CVPR 2026 | 本集 DOI |
| 管线移植 | CVPR 论文 + GitHub | — |
附录 F:时间线总表
时间线总表
时间线总表
| 时点 | 事件 |
|---|---|
| 2025-11 | arXiv 2511.15186 提交 |
| 2026-03-25 | PhysioNet v1.0.0 挂牌 |
| 2026-06 | CVPR 2026 发表(pp.1482-1492) |
| 2026-09 | 核查时点 Views 125 |
附录 G:与本批姊妹集的对照(KAIST 双线)
与本批姊妹集的对照(KAIST 双线)
与本批姊妹集的对照(KAIST 双线)
| 维度 | 514 lunguage | 516(本集) |
|---|---|---|
| 任务 | 报告结构化基准(NLP) | 指令引导分割(CV) |
| 模态 | 文本 | 图像+掩码+文本 |
| 规模 | 1,473+80 | 1.1M 对+91K 掩码 |
| 质控 | 专家逐条 | 管线+抽样 |
| 发表 | CHIL 2026 | CVPR 2026 |
| 角色 | 度量衡 | 训练燃料 |
附录 H:数据质量声明卡
数据质量声明卡
数据质量声明卡
| 声明项 | 状态 | 说明 |
|---|---|---|
| 规模自洽 | ✓ | 1,065,621=135,291+930,330 ✓ |
| 切分 | ✓ | 官方 train/val/test 数字对齐 |
| 访问级别 | ✓ 已实测 | Credentialed(页面原文) |
| 论文背书 | ✓ | CVPR 2026 官方页确认 |
| 验证抽样规模 | △ 未披露 | 接受率>95% 的 n 未知 |
| 负例构成 | △ 未细分 | 三类假说(正文标注) |
| 原始图像 | ✗ 不含 | 需 MIMIC-CXR 另取 |
| Views 口径 | ✓ | unique registered users |
附录 I:批次七进度存照(516 为批次七首条)
批次七进度存照(516 为批次七首条)
批次七进度存照(516 为批次七首条)
批次六收官:506-515 十集全闭环(rid 606-615)
批次七开篇:516 mimic-cxr-ext-ils rid 616 ✅ 2026-09-23(本条)
517-525 mimic-cxr-jpg / mimic-iv-ext-pe / MS-CXR-T / myocardial-perfusion-spect /
rad-coref / radgraph2 / RaDialog / RadVLM / REFLACX
批次七工单:(新开)| 全库在架 604(del_sign=0 口径)
附录 J:与 514 的姊妹对照卡(KAIST 双线)
与 514 的姊妹对照卡(KAIST 双线)
与 514 的姊妹对照卡(KAIST 双线)
| 维度 | 514 lunguage | 516(本集) |
|---|---|---|
| 任务 | 报告结构化基准(NLP) | 指令引导分割(CV) |
| 模态 | 文本 | 图像+掩码+文本 |
| 规模 | 1,473+80 | 1.1M 对+91K 掩码 |
| 质控 | 专家逐条 | 管线+抽样 |
| 发表 | CHIL 2026 | CVPR 2026 |
| 角色 | 度量衡 | 训练燃料 |
附录 K:与本批九集的互文(十则精选)
与本批九集的互文(十则精选)
与本批九集的互文(十则精选)
- 506:同为’测量/掩码’产物——506 模型算 CTR、516 管线生成分割对(MIMIC 派生的两种自动化)
- 507:同含’多类型目标’——507 七设备矩阵、516 七病灶——因子设计的不同对象
- 509:同为’专家验证’——509 κ 双轮(共识制)、516 抽样验证(管线制)
- 510:形态近亲——510 人工解剖掩码、516 自动病灶指令对(小而精 vs 大而广)
- 511:同为 MIMIC 大规模派生——511 蒸馏语义、516 生成监督信号
- 512:同为新任务范式——512 ILS 评测对齐、516 定义 ILS 任务
- 513:同为’人工+自动’混合——513 筛检制、516 抽样验证
- 514:同班底姊妹作——514 报告结构化(NLP)、516 指令分割(CV)
- 515:同为原生采集/派生的表格与掩码对照
- 全家族:516 是 MIMIC 派生的第九形态——像素级病灶指令对
附录 L:批次七开篇账本(516 为首条)
批次七开篇账本(516 为首条)
批次七开篇账本(516 为首条)
批次六收官:506-515 十集全闭环(rid 606-615)
批次七开篇:516 mimic-cxr-ext-ils rid 616 ✅ 2026-09-23(本条)
517-525 mimic-cxr-jpg / mimic-iv-ext-pe / MS-CXR-T / myocardial-perfusion-spect /
rad-coref / radgraph2 / RaDialog / RadVLM / REFLACX
批次七工单:(新开)| 全库在架 604(del_sign=0 口径)
附录 M:研究题三道(可发表)
研究题三道(可发表)
研究题三道(可发表)
- 《负例构成的三类分解与缺失报告可靠性》——把 930,330 负例按’真无/他病/模糊’分解——ILS 负例质量的首篇分析。
- 《管线组件的敏感性分析》——替换 LLM/分割器/映射表的组件消融——四阶段管线哪个环节最影响接受率。
- 《指令多样性的鲁棒性谱》——同义改写/模糊/多目标的指令压力测试——ILS 模型的指令理解边界图谱。
附录 N:给下一位核查者的五问五答
给下一位核查者的五问五答
给下一位核查者的五问五答
Q1 最重要的复核点? CVPR 2026 页码与论文版本(1482-1492 以 CVF 官方为准)。
Q2 数字最易错的? 1,065,621/91,301/191,563 三个规模数字——与 510 的掩码数别串。
Q3 名称最易混的? MIMIC-ILS(论文)vs MIMIC-CXR-Ext-ILS(PhysioNet)——双名并存。
Q4 验证的边界? 95%+ 接受率是抽样——非逐条保证。
Q5 与 514 的关系? 同班底姊妹作——514 NLP/516 CV。
附录 O:三条引文(收束备选)
三条引文(收束备选)
三条引文(收束备选)
- 引管线工程师:‘四阶段全自动管线的精髓不是省人力,是让每个环节都可替换、可审计。’
- 引评审者:‘95% 的接受率+CVPR 的背书——全自动标注第一次拿到了顶会的通行证。’
- 引学生:‘原来’指哪打哪’的训练,是用 110 万条人话指令喂出来的。’
附录 P:三条读者路线的一页纸(终版)
三条读者路线的一页纸(终版)
三条读者路线的一页纸(终版)
- 分割研究者:§5.3 复现 ROSALIA+附录 N 账本——CVPR 级复现的完整路径。
- 管线工程师:§2.2 四阶段解剖+§5.5 管线移植——组件替换的方法学输出。
- XAI 研究者:负例三类构成+管线偏见审计——全自动标注的伦理技术双面。
附录 Q:FAQ 补遗五十问(编号 91-140)
FAQ 补遗五十问(编号 91-140)
91 管线的 LLM 是哪个?—— 页面未指明具体模型(管线可替换)。
92 位置映射的词典规模?—— 页面给示例未给全表。
93 掩码生成的监督来源?—— 报告定位+图像双模态。
94 指令的多样性来源?—— 模板+报告上下文变化。
95 负例的三类构成?—— 真无/他病/模糊(推断分类)。
96 七病灶的选择依据?—— CXR 高频病灶(页面口径)。
97 前行工作的单病灶指什么?—— COVID-19 分割集。
98 专家级描述 vs 简单指令的差异?—— 长篇描述 vs 一句话请求。
99 ROSALIA 的骨干?—— LISA 微调。
100 文本解释的质量怎么评?—— 论文口径(人工/自动)。
101 1.1M 对的正负比?—— 约 1:6.9。
102 cardiomegaly 正例占比高的原因?—— 全局请求型指令密集。
103 consolidation 稀缺的原因?—— 实变的指令-掩码对天然少。
104 缺失报告的能力怎么测?—— 负例上的’报告缺失’准确率。
105 val/test 的规模?—— 正例 1,112/2,354;负例 7,134/9,881。
106 患者级切分吗?—— 论文口径为准(subject 键推断)。
107 掩码的分辨率?—— 与源图对齐(具体以文件为准)。
108 JSON 的体积?—— 未披露(含全库指令对与上下文)。
109 掩码是二值吗?—— 是(病灶区域分割)。
110 多病灶共存的图怎么处理?—— 多掩码/多对(每病灶一对)。
111 指令能是中文吗?—— 语料为英语——多语言是扩展方向。
112 训练 LISA 的显存?—— 论文/代码口径(多卡)。
113 负例的指令形态?—— '找出 X’但图无 X——答案为缺失报告。
114 抽样验证的规模?—— 未披露(接受率>95% 存照)。
115 四专家的分工?—— 独立评估(具体分工未披露)。
116 接受率 95% 的含义?—— 生成对被专家接受的比例。
117 管线代码开源吗?—— ROSALIA repo 含相关代码。
118 与 514 的词表互通?—— 不同任务不同 schema——各自独立。
119 与 511 嵌入的 join?—— dicom_id 可通——跨集对齐可做。
120 掩码能转 RLE 吗?—— 能(COCO 转换)。
121 指令-答案对的答案形态?—— 掩码(正例)/缺失报告(负例)+文本解释。
122 训练收敛的 epoch?—— 论文口径。
123 推理延迟?—— 未披露——按 LISA 级推算。
124 七类外的病灶怎么处理?—— 不在库——模型输出不可信。
125 管线的可复现性?—— 代码开源+LLM 版本存照。
126 本集与 MS-CXR 的对照?—— MS-CXR 人工 1,153 对;本集自动 1.1M——不同档位。
127 RadGraph 的角色?—— 管线阶段 1 的谱系前身(报告结构化)。
128 与 514 的实体抽取共用吗?—— 不同 schema——各自独立。
129 掩码的边界质量?—— 自动生成的像素精度——抽样验证背书。
130 视觉骨干是什么?—— ROSALIA 基于 LISA(论文口径)。
131 指令由谁写的?—— 管线自动生成(模板+LLM)——非人工。
132 负例的指令也是自动的吗?—— 是——全管线自动。
133 数据的使用许可?—— Credentialed 1.5.0(禁再分发)。
134 能做 CT 吗?—— 管线可移植——本集仅 CXR。
135 ROSALIA 的文本解释评测?—— 论文口径(自动+人工)。
136 与 Grad-CAM 的对照?—— ILS 是显式分割——比热图精确。
137 本集的引用三件套?—— 本集 DOI+CVPR 论文+MIMIC-CXR。
138 患者数(去重)?—— 未披露——按 subject 前缀推断(s#########)。
139 掩码的命名规则?—— s#########类型#.png。
140 七类的临床排序?—— 按 CXR 高频病灶(页面口径)。
附录 R:一百二十条一分钟事实(第 1-120 条·节选八十)
一百二十条一分钟事实(第 1-120 条·节选八十)
1 DOI 10.13026/8ejy-4t06。
2 发布 2026-03-25,v1.0.0。
3 访问 Credentialed 1.5.0+DUA。
4 论文名 MIMIC-ILS,挂牌名 MIMIC-CXR-Ext-ILS。
5 KAIST 七人团队。
6 与 514 Lunguage 同班底。
7 Geon Choi 一作。
8 Edward Choi 通讯。
9 CVPR 2026 发表 pp.1482-1492。
10 arXiv 2511.15186。
11 191,563 张 CXR。
12 1,065,621 指令-答案对。
13 正例 135,291。
14 负例 930,330。
15 91,301 个掩码。
16 七病灶类型。
17 cardiomegaly 正例 40,243。
18 pneumonia 9,781。
19 atelectasis 21,471。
20 opacity 10,933。
21 consolidation 3,919。
22 edema 34,676。
23 effusion 14,268。
24 正负比约 1:6.9。
25 四阶段全自动管线。
26 阶段 1:LLM 报告结构化。
27 阶段 2:位置映射。
28 阶段 3:掩码生成。
29 阶段 4:指令对生成。
30 ‘lower lung’显式映射肺基底。
31 四名 radiation oncologists 验证。
32 接受率 >95%。
33 全自动无人工逐条。
34 ROSALIA=LISA 微调。
35 分割+缺失报告+文本解释三能力。
36 代码 checkoneee/ROSALIA。
37 ILS=RIS 的医学适配。
38 RIS=referring image segmentation。
39 先行工作限单病灶+长描述。
40 本集突破:多病灶+简单指令+缺失报告。
41 负例是任务半壁。
42 负例三类构成是推断。
43 训练需类别加权(七类不均衡)。
44 掩码 PNG 格式。
45 命名 s########类型#.png。
46 JSON 承载全库指令对。
47 文档型 vs 关系型的组织哲学。
48 全批最新挂牌(2026-03-25)。
49 Views 125。
50 Credentialed 1.5.0。
51 与 514 同班底姊妹作。
52 514 NLP、516 CV。
53 514 度量衡、516 训练燃料。
54 与 510 形态近亲(掩码)。
55 510 人工解剖、516 自动病灶。
56 DAIMS 7.0。
57 rid 616。
58 批次七开篇首条。
59 全库在架 604。
60 管线可移植(换 LLM/分割器)。
61 负例三类构成是推断标注。
62 抽样验证的统计效力可计算。
63 七类外病灶不可信。
64 长尾病灶是 v2 方向。
65 与 MS-CXR 对照:人工 1,153 vs 自动 1.1M。
66 CVPR 是本批最高发表级别。
67 管线各组件可替换可审计。
68 LLM 结构化是管线第一环。
69 位置映射是第二环。
70 掩码生成是第三环。
71 指令对生成是第四环。
72 误差会级联传导。
73 抽样验证的 n 未披露。
74 统计效力可计算(二项 CI)。
75 与 509/510 的质控三制集齐。
76 共识制/审校制/管线制——标注工程决策树完整。
77 管线制的适用:超大规模弱监督。
78 MIMIC 覆盖 51%(191K/377K)。
79 半库覆盖的抽样策略。
80 七类外的病灶不在库。
81 负例 930,330 的三类分解是开放题。
82 指令多样性是 ILS 的卖点。
83 模糊指令是压力测试方向。
84 多目标指令是进阶实验。
85 管线组件可替换。
86 LLM 版本影响可复现。
87 与 514 联合=多模态对齐两侧。
88 dicom_id 全家桶连通。
89 掩码与原图对齐需 MIMIC。
90 引用三件套:DOI+CVPR+MIMIC。
91 ROSALIA 权重按 repo 许可。
92 全批发表级别最高(CVPR)。
93 管线制是标注工程第三哲学。
94 规模换精度是自觉交易。
95 ILS 任务由本集定义。
96 对话式分割的起点。
97 负例教’诚实说没有’。
98 管线四环可独立审计。
99 1.1M 对的规模经济。
100 术语管线制/抽样制入账。
附录 S:七病灶逐类卡(临床与管线视角)
七病灶逐类卡(临床与管线视角)
- cardiomegaly:心影增大——全局形态类,正例占比 62% 最高;指令多为’找心大’
- pneumonia:肺炎——临床综合诊断(非纯影像);正例 9,781
- atelectasis:肺不张——空间关系类(叶间裂移位);21,471 正例
- opacity:浑浊——弥漫性密度增高;10,933 正例
- consolidation:实变——密度鉴别最难;3,919 正例(最低)
- edema:水肿——心衰共现网络;34,676 正例
- effusion:积液——肋膈角形态;14,268 正例
附录 T:四阶段管线逐阶段详解
四阶段管线逐阶段详解
| 阶段 | 输入 | 处理 | 输出 | 误差形态 |
|---|---|---|---|---|
| 1 报告结构化 | 报告全文 | LLM 解析 | 结构化元组 | 实体/位置误判 |
| 2 位置映射 | 元组 | 解剖词典映射 | 标准位置 | 映射表覆盖缺口 |
| 3 掩码生成 | 图像+定位 | 双模态分割 | 像素掩码 | 边界精度 |
| 4 指令对生成 | 掩码+报告 | 模板+LLM | 指令-答案对 | 模板多样性 |
附录 U:批注版指令样例(示意)
批注版指令样例(示意)
指令:"Segment the pleural effusion in the left lung base."
答案(正例):掩码 PNG + 文本解释
"There is a small pleural effusion at the left costophrenic angle."
指令(负例):"Segment the pneumothorax."
答案(负例):"No pneumothorax detected."(缺失报告)
附录 V:批次七开篇账本(修订)
批次七开篇账本(修订)
批次六收官:506-515 十集全闭环(rid 606-615)
批次七开篇:516 mimic-cxr-ext-ils rid 616 ✅ 2026-09-23
517-525 mimic-cxr-jpg / mimic-iv-ext-pe / MS-CXR-T / myocardial-perfusion-spect /
rad-coref / radgraph2 / RaDialog / RadVLM / REFLACX
批次七工单:已建 | 全库在架 604
附录 W:七病灶的临床意义卡(诊断维度)
七病灶的临床意义卡(诊断维度)
| 病灶 | 影像学锚与临床关联 |
|---|---|
| cardiomegaly | CTR>0.5(506 的 CTR 数值层)——心衰/瓣膜病/心包积液 |
| pneumonia | 浸润/实变/间质改变——感染(细菌/病毒) |
| atelectasis | 叶间裂移位+密度增高——术后/阻塞性 |
| opacity | 弥漫密度增高(非特异)——多病因重叠 |
| consolidation | 肺泡实变+气支气管征——肺炎/出血 |
| edema | 蝶翼/血管蒂/Kerley 线——心源性/容量过量 |
| effusion | 肋膈角钝化/半月形——心衰/感染/肿瘤 |
附录 X:指令模板的设计模式(管线阶段 4 的模板库)
指令模板的设计模式(管线阶段 4 的模板库)
模式 1 类型指定:'Segment the {lesion}.'
模式 2 类型+位置:'Segment the {lesion} in the {location}.'
模式 3 全局请求:'Find any abnormality.'
模式 4 描述式:'Outline the {finding} described as {report_quote}.'
模式 5 缺失应答:'Is there {lesion}?' → 'No {lesion} detected.'
—— 五模式的覆盖决定指令对的多样性上限。
附录 Y:管线可维护性的四个开关(组件替换点)
管线可维护性的四个开关(组件替换点)
| 开关 | 替换什么 | 收益 | 风险 |
|---|---|---|---|
| LLM 模型 | 报告结构化底座 | 更强解析 | prompt 重调 |
| 位置映射表 | 解剖词典 | 覆盖扩展 | 维护成本 |
| 分割器 | 掩码生成骨干 | 精度提升 | 误差特性变化 |
| 指令模板 | 多样性模板库 | 指令丰富度 | 模板偏差 |
附录 Z:负例的教学价值三则
负例的教学价值三则
- 诚实性训练——模型学会’没有就是没有’,不硬找。
- 代价敏感——漏报缺失的临床代价(过度报告引不要的检查)可量化。
- 校准研究——负例上的置信度校准是部署前必测。
附录 AA:与本批九集的两两互文(十则精选·终)
与本批九集的两两互文(十则精选·终)
- 506:同为’测量/掩码’产物——506 模型算 CTR、516 管线生成分割对
- 507:同含’多类型目标’——507 七设备矩阵、516 七病灶
- 509:同为’专家验证’——509 κ 双轮(共识制)、516 抽样验证(管线制)
- 510:形态近亲——510 人工解剖掩码、516 自动病灶指令对
- 511:同为 MIMIC 大规模派生——511 蒸馏语义、516 生成监督信号
- 512:同为新任务范式——512 ILS 评测对齐、516 定义 ILS 任务
- 513:同为’人工+自动’混合——513 筛检制、516 抽样验证
- 514:同班底姊妹作——514 报告结构化(NLP)、516 指令分割(CV)
- 515:同为’表格+掩码’对照——515 测量表、516 掩码+指令对
- 全家族:516 是 MIMIC 派生的第九形态——像素级病灶指令对
附录 AB:与 510 的七维对照(扩展版)
与 510 的七维对照(扩展版)
| 维度 | 510 heart-lung-seg | 516(本集) |
|---|---|---|
| 掩码对象 | 心+肺(解剖结构) | 七类病灶(病理) |
| 生成 | 人工勾画(ITK-Snap) | 四阶段全自动管线 |
| 质控 | NHS 逐图审校 | 四专家抽样(95%+) |
| 规模 | 538 掩码 | 91,301 掩码+1.1M 对 |
| 许可 | ODC-BY(Open) | Credentialed 1.5.0 |
| 团队 | 牛津六人 | KAIST 七人 |
| 挂牌 | 2023-08 | 2026-03(本批最新) |
| rid | 610 | 616 |
附录 AC:ROSALIA 三能力的部署映射
ROSALIA 三能力的部署映射
| 能力 | 部署场景 | 依赖 |
|---|---|---|
| 按指令分割 | 医生圈选病灶的辅助勾画 | VLM 推理(GPU) |
| 缺失报告 | 阴性筛查的诚实输出 | 指令理解+置信阈值 |
| 文本解释 | 报告草稿的病灶描述 | 语言生成质量 |
三能力对应三种集成形态:标注辅助、筛查守门、报告起草——同一模型的三种临床落点。
附录 AD:FAQ 二轮补遗二十问(编号 141-160)
141 管线的 LLM 是哪个?—— 页面未指明(管线可替换)。
142 位置映射词典全表公开吗?—— 页面给示例未给全表。
143 掩码生成的监督?—— 报告定位+图像双模态。
144 指令多样性来源?—— 模板+报告上下文变化。
145 负例三类构成?—— 真无/他病/模糊(推断分类)。
146 七病灶选择依据?—— CXR 高频病灶。
147 先行工作单病灶指什么?—— COVID-19 分割集。
148 ROSALIA 骨干?—— LISA 微调。
149 文本解释怎么评?—— 论文口径(人工+自动)。
150 正负比?—— 约 1:6.9。
151 cardiomegaly 占比高原因?—— 全局请求型指令密集。
152 consolidation 稀缺原因?—— 实变对天然少。
153 缺失报告怎么测?—— 负例上的’报告缺失’准确率。
154 val/test 规模?—— 正例 1,112/2,354;负例 7,134/9,881。
155 患者级切分吗?—— 论文口径为准。
156 掩码分辨率?—— 与源图对齐。
157 JSON 体积?—— 未披露(全库指令对)。
158 掩码是二值吗?—— 是。
159 多病灶图怎么处理?—— 多掩码/多对。
160 指令能中文吗?—— 英语语料——多语言是方向。
附录 AE:十问自测(速记)
1 DOI?—— 10.13026/8ejy-4t06
2 发布?—— 2026-03-25 v1.0.0(全库最新)
3 访问?—— Credentialed 1.5.0+DUA
4 规模?—— 191,563 图+1,065,621 对+91,301 掩码
5 七病灶?—— 心大/肺炎/肺不张/浑浊/实变/水肿/积液
6 管线?—— 四阶段全自动(LLM 结构化→位置→掩码→指令对)
7 验证?—— 四专家抽样 95%+ 接受率
8 论文?—— CVPR 2026 pp.1482-1492
9 模型?—— ROSALIA(LISA 微调)
10 一句话?—— 指哪打哪:110 万条人话指令教会 AI 分割病灶
附录 AF:批次七账本与下一发
批次七进度:1/10(516 闭环)
517 mimic-cxr-jpg MIMIC-CXR-JPG 主条目——下一发
518 mimic-iv-ext-pe MIMIC-IV-Ext-PE(CT 肺栓塞)
519 MS-CXR-T 纵向对齐(微软,slug 待实测)
520 myocardial-perfusion-spect 心肌灌注 SPECT
521-525 rad-coref / radgraph2 / RaDialog / RadVLM / REFLACX
全库在架:604(del_sign=0 口径)
附录 AG:三条引文(收束备选·终)
- 引管线工程师:‘四阶段全自动管线的精髓不是省人力,是让每个环节都可替换、可审计。’
- 引评审者:‘95% 的接受率+CVPR 的背书——全自动标注第一次拿到了顶会的通行证。’
- 引学生:‘原来"指哪打哪"的训练,是用 110 万条人话指令喂出来的。’
附录 AH:与 514 的七维对照(姊妹终版)
| 维度 | 514 lunguage | 516(本集) |
|---|---|---|
| 任务 | 报告结构化评测(NLP) | 指令引导分割(CV) |
| 模态 | 文本 | 图像+掩码+文本 |
| 规模 | 1,473+80 | 1.1M 对+91K 掩码 |
| 质控 | 专家逐条 | 管线+抽样 |
| 发表 | CHIL 2026 | CVPR 2026 |
| 角色 | 度量衡 | 训练燃料 |
| rid | 614 | 616 |
相关数据集导航
以下为站内 AI-Ready 数据集百科中与本词条共享多个主题标签的相关数据集,按相关度降序排列:
- chexmask-cxr-segmentation-data — 共享标签:医学影像 / X光影像 / 医学图像分割
- chexmask-u — 共享标签:医学影像 / X光影像 / 医学图像分割
- lung-segment-mimic-cxr — 共享标签:医学影像 / X光影像 / 医学图像分割
- hecktor — 共享标签:医学影像 / X光影像 / 医学图像分割
- chexlocalize — 共享标签:医学影像 / X光影像 / 医学图像分割
- lidc-idri — 共享标签:医学影像 / X光影像 / 医学图像分割
- siim-acr-pneumothorax — 共享标签:医学影像 / X光影像 / 医学图像分割
- chexpert — 共享标签:医学影像 / X光影像
- nih-chestx-ray14 — 共享标签:医学影像 / X光影像
- mimic-cxr — 共享标签:医学影像 / X光影像
导航说明:本章节由全站统一标签体系自动计算生成(标签重合度算法),双向可达;点击链接可跳转至对应数据集词条。

