牙周病学随机临床试验结构化数据提取人工智能工具比较评估

3项开发集锁定统一提示;30项验证集以准确率、遗漏、幻觉、处理时间和Fleiss’ κ评估。提示、脚本、输出、参考数据以CC-BY 4.0开放(来源 osf.io)

osf
浏览 23
文本accuracy assessmentartificial intelligencedata extractionlarge language modelsmeta-researchperiodontologyrandomized clinical trialssystematic review
Comparative Evaluation of Artificial Intelligence Tools for Structured Data Extraction from Randomized Clinical Trials in Periodontology

基本信息

模态
文本
创建/更新时间
2026-10-01

资源简介

牙周病学随机临床试验结构化数据提取人工智能工具比较评估

按STARD-AI诊断准确性研究,测试GPT-o3、Gemini 2 Pro、DeepSeek-R1、Perplexity Pro四种大语言模型,从Joseph等2024年30项牙周随机临床试验中提取18个预设变量。3项开发集锁定统一提示;30项验证集以准确率、遗漏、幻觉、处理时间和Fleiss’ κ评估。提示、脚本、输出、参考数据以CC-BY 4.0开放(来源 osf.io)。

【数据内容】

源站描述(机器翻译,仅供参考):诊断准确性研究,按 STARD-AI 报告,对四种大语言模型工具(GPT-o3、Gemini 2 Pro、DeepSeek-R1、Perplexity Pro)进行基准测试,用于从取自 Joseph 等 2024 的 30 项牙周随机临床试验中自动提取 18 个预设变量。使用一个包含三项研究的开发集锁定通用提示词;在 30 项试验验证集上的性能通过准确率、遗漏、幻觉、处理时间和 Fleiss’ κ 指标进行量化。所有提示词、脚本、输出和参考数据集均在 CC-BY 4.0 许可下公开可用。

【主题与分类】

主题标签:accuracy assessment、artificial intelligence、data extraction、large language models、meta-research、periodontology、randomized clinical trials、systematic review。本站分类:口颌系统疾病/其他。

【获取与许可】

源站页面:https://osf.io/nwjc2

官方服务

专家保障全链路合规授权与标注交付

陕川双基地 × 超十家三甲医院直连

从合规授权、采集治理、专业标注到数据集交付,我们提供全链路闭环服务,让高质量临床数据即拿即用。

⚡️ 需要原始数据或标注支持?联系我们获取定制方案。

帮我联系

下载信息

注册下载

需要注册 Kaggle 账号并登录后下载,适合需要跟踪下载记录和使用 API 的用户。

暂未开放

公开下载

无需注册即可直接获取公开样本或文档,适合快速预览和评估数据集质量。

免登录

有偿下载

公开数据集受托下载与技术交付服务。

提供高速下载与技术交付服务(收技术服务费,非数据销售)

暂未开放

当前数据集主要来源为 Kaggle 公开托管,完整影像包建议通过原始链接或 Kaggle API 获取。

使用方式

数据集获取

源站:https://osf.io/nwjc2

标准获取流程:

  1. 访问源站链接,注册/登录账号;
  2. 进入数据集详情页,按页面指引申请权限或直接下载;
  3. 部分平台提供 SDK,例如:
    • OpenDataLab: pip install openxlab 后 openxlab.dataset.get(...)
    • ModelScope: pip install modelscope 后 modelscope download
    • 天池: 登录后页面提供直链下载
      以源站「数据下载/使用文档」页面为准。

数据说明

诊断准确性研究,按 STARD-AI 报告,对四种大语言模型工具(GPT-o3、Gemini 2 Pro、DeepSeek-R1、Perplexity Pro)进行基准测试,用于从取自 Joseph 等 2024 的 30 项牙周随机临床试验中自动提取 18 个预设变量。使用一个包含三项研究的开发集锁定通用提示词;在 30 项试验验证集上的性能通过准确率、遗漏、幻觉、处理时间和 Fleiss’ κ 指标进行量化。所有提示词、脚本、输出和参考数据集均在 CC-BY 4.0 许可下公开可用。

数据加载示例(图像类)

from PIL import Image
import glob, os

files = (glob.glob(os.path.join(path, "**", "*.png"), recursive=True)
       + glob.glob(os.path.join(path, "**", "*.jpg"), recursive=True)
       + glob.glob(os.path.join(path, "**", "*.tif"), recursive=True))
print("图像文件数:", len(files))
img = Image.open(files[0]); print("尺寸/模式:", img.size, img.mode)

# torchvision Dataset 方式:
# from torchvision import datasets
# ds = datasets.ImageFolder(path)  # 要求 子目录=类别

目录组织与标注格式以源站说明和下载后实际文件为准。

数据缺失?

依托陕西、四川两大基地,我们与超过十家三甲医院建立直接合作关系,覆盖合规授权、采集治理、专业标注、数据交付的全流程,为AI医疗团队提供即拿即用的高质量临床数据。

⚡️ 需要数据支持或标注服务?立即联系我们获取专业方案。

获取专属数据定制方案