CAG-VLM

冠状动脉造影图像识别的双语图像-报告数据集,含539次检查14,686帧图像,用于微调视觉语言模型辅助诊断和治疗。

东京大学东京大学
arXiv
2025-05-08 更新
浏览 43
医学影像、文本冠状动脉疾病医学影像

基本信息

模态
医学影像、文本
创建/更新时间
2025-05-08

资源简介

CAG-VLM数据集是由东京大学和东京大学医院创建的用于冠状动脉造影图像识别的双语(日语/英语)图像-报告数据集。包含539次检查的14,686帧图像,其中1,114帧为关键帧,与术前报告和专家验证的诊断治疗摘要配对。数据模态为医学影像和文本,旨在通过微调视觉语言模型辅助临床报告生成和治疗建议。

原始链接

http://arxiv.org/abs/2505.04964v1

访问原始数据

官方服务

如需原始数据获取支持或标注服务,请联系我们。

帮我联系

下载信息

注册下载

Tips: 该数据集需要在对应的数据源网站注册通过后,才能进行数据下载,注册有对应要求,或者需要收费。

暂未开放

公开下载

Tips: 该数据集属于公开下载,应该可以免费公开下载。

免登录

有偿下载

Tips: 该数据集 Qianfanghub 可以协助提供有偿下载服务,注意,服务不针对数据相关产权,只是技术服务费。

提供高速下载与技术交付服务(收技术服务费,非数据销售)

暂未开放

千方医数集,医疗数据集部分,是为社区服务的公开医疗数据集搜索引擎,并不存储或者下载原始的任何数据。 如果您有其他医疗数据需求,可以和客服联系,或者下工单。我们有强大的三甲医疗机构帮助您提供个性化的医疗数据定制、采集、标注服务。

使用方式

数据集说明

CAG-VLM 对应论文数据集(arXiv 预印本)。

数据获取指引

  1. 打开论文页面获取作者与项目信息:https://arxiv.org/abs/2505.04964v1
  2. 论文 Data Availability / Code Availability 章节标注了数据实际托管位置;
  3. 获取到实际数据链接后,按对应平台标准方式下载。

论文摘要:Abstract:Coronary angiography (CAG) is the gold-standard imaging modality for evaluating coronary artery disease, but its interpretation and subsequent treatment planning rely heavily on expert cardiologists. To enable AI-based decision support, we introduce a two-stage, physician-curated pipeline and a bilingual (Japanese/English) CAG image-report dataset. First, we sample 14,686 frames from 539 exams and annotate them for key-frame detection and left/right laterality; a ConvNeXt-Base CNN trained on this data achieves 0.96 F1 on laterality classification, even on low-contrast frames. Second, we apply the CNN to 243 independent exams, extract 1,114 key frames, and pair each with its pre-procedure report and expert-validated diagnostic and treatment summary, yielding a parallel corpus. We then fine-tune three open-source VLMs (PaliGemma2, Gemma3, and ConceptCLIP-enhanced Gemma3) via LoRA and evaluate them using VLScore and cardiologist review. Although PaliGemma2 w/LoRA attains the highest VLScore, Gemma3 w/LoRA achieves the top clinician rating (mean 7.20/10); we designate this best-performing model as CAG-VLM. These results demonstrate that specialized, fine-tuned VLMs can effectively assist cardiologists in generating clinical reports and treatment recommendations from CAG images.

论文页面:https://arxiv.org/abs/2505.04964v1

精度瓶颈?数据缺失?

当前公开数据无法满足您的算法精度?千方提供针对 冠状动脉疾病 的高质量、多模态真实临床数据定制解决方案。

获取专属数据定制方案