Open LLM Leaderboard上Medichat-Llama3-8B模型评估结果
Open LLM Leaderboard上对Medichat-Llama3-8B医疗聊天模型的评估结果，包含63个任务指标。
基本信息
模态
表格
创建/更新时间
2024-04-23
资源简介
该数据集包含对sethuiyer/Medichat-Llama3-8B医疗聊天模型在Open LLM Leaderboard上的评估结果，包括63个任务配置（如ARC、HellaSwag、MMLU等）的准确率、标准误差等指标，以及聚合的总体结果，用于衡量模型在多种推理和知识任务上的表现。
下载信息
注册下载
Tips: 该数据集需要在对应的数据源网站注册通过后，才能进行数据下载，注册有对应要求，或者需要收费。
暂未开放公开下载
Tips: 该数据集属于公开下载，应该可以免费公开下载。
免登录有偿下载
Tips: 该数据集 Qianfanghub 可以协助提供有偿下载服务，注意，服务不针对数据相关产权，只是技术服务费。
提供高速下载与技术交付服务（收技术服务费，非数据销售）
暂未开放千方医数集，医疗数据集部分，是为社区服务的公开医疗数据集搜索引擎，并不存储或者下载原始的任何数据。 如果您有其他医疗数据需求，可以和客服联系，或者下工单。我们有强大的三甲医疗机构帮助您提供个性化的医疗数据定制、采集、标注服务。
使用方式
数据集获取与加载（Hugging Face datasets）
# 前置依赖: pip install datasets
from datasets import load_dataset
ds = load_dataset("open-llm-leaderboard/details_sethuiyer__Medichat-Llama3-8B")
print(ds) # 查看 splits 与字段结构
# 国内网络可先设镜像: import os; os.environ["HF_ENDPOINT"]="https://hf-mirror.com"
git lfs install && git clone https://hf-mirror.com/datasets/open-llm-leaderboard/details_sethuiyer__Medichat-Llama3-8B
仓库文件结构
.gitattributesREADME.mdresults_2024-04-23T04-35-55.158266.jsonresults_2024-04-23T04-35-55.158266.parquet
完整数据卡：huggingface.co/datasets/open-llm-leaderboard/details_sethuiyer__Medichat-Llama3-8B
精度瓶颈？数据缺失？
当前公开数据无法满足您的算法精度？千方提供针对 其他 的高质量、多模态真实临床数据定制解决方案。
