NeuroEmbed

NeuroEmbed是用于神经退行性疾病研究的语义精准嵌入空间工程方法,实现了元数据标准化和语义索引,覆盖2,801个数据集和15万样本。

伦敦大学学院神经退行性疾病系伦敦大学学院神经退行性疾病系
arXiv
2025-06-16 更新
浏览 10
文本神经退行性疾病元数据标准化
NeuroEmbed

基本信息

模态
文本
大小
0.000663 GB
创建/更新时间
2025-06-16
版本
main

资源简介

NeuroEmbed

【数据集背景】

本数据集源站标题为《joseadrianpp/NeuroEmbed》。源站首次发布:2026-06-05。

【数据内容】

源站原始描述:# NeuroEmbed NeuroEmbed is an ontology-augmented embedding approach that transforms Gene Expression Omnibus (GEO) neurodegeneration studies into a coherent and searchable atlas. It aligns free-text metadata with biomedical ontologies and maps each cohort into a dense semantic space. NeuroEmbed allows researchers to express natural-language queries such as: - Show me Alzheimer’s disease RNA-Seq cohorts obtained from the human hippocampus. - Find Parkinson’s studies that profile dopaminergic neuro…

中文译文(机器翻译,仅供快速理解,请以原文为准):# NeuroEmbed NeuroEmbed 是一种本体增强的嵌入方法,可将基因表达综合数据库(GEO)中的神经退行性研究转化为一个连贯且可搜索的图谱。它将自由文本元数据与生物医学本体对齐,并将每个队列映射到一个密集的语义空间中。NeuroEmbed 允许研究人员表达自然语言查询,例如: - 展示我从人类海马体获得的阿尔茨海默病 RNA-Seq 队列。 - 查找使用单细胞测定法分析多巴胺能神经元的帕金森病研究。 - 我对使用阵列数据进行蛋白质组学分析、涉及男性受试者且与亨廷顿病相关的样本感兴趣。 在几毫秒内,NeuroEmbed 会返回排序后的 GEO 登录号、丰富的队列描述符以及指向原始记录的直达链接——无需临时拼凑关键词技巧或手动筛选电子表格。NeuroEmbed 可在此处获取。NeuroEmbed 代码库可在此处获取。NeuroEmbed 使用 Streamlit 界面。用户只需输入问题,即可在浏览器中接收流式结果,并可深入查看样本级别的详细信息。该原型运行在一个经过微调的 PubMedBERT 编码器上,该编码器在 36.8 万个问题–队列对上进行了训练。NeuroEmbed 在我们的 2,801 个队列和 204,361 个样本中实现了 0.92 的平均检索精度,并以完美准确率解析四项查询。正在进行的工作正在将覆盖范围扩展到完整的样本元数据和多组学特征,以便未来的查询能够将临床元数据与分子相似性结合起来。有关 NeuroEmbed 背后方法的更多信息,请参阅我们的预印本。 ## 截图 以下是 NeuroEmbed 实际运行的示例截图: *查询示例:展示我从人类海马体获得的阿尔茨海默病 RNA-Seq 队列。* *查询示例:查找使用单细胞测定法分析多巴胺能神经元的帕金森病研究。* *查询示例:我对使用阵列数据进行蛋白质组学分析、涉及男性受试者且与亨廷顿病相关的样…

【适用方向】

文本类数据可用于医学自然语言处理,如命名实体识别、信息抽取与文本分类。

【获取与许可】

源站页面:https://github.com/joseadrianpp/NeuroEmbed

官方服务

专家保障全链路合规授权与标注交付

陕川双基地 × 超十家三甲医院直连

从合规授权、采集治理、专业标注到数据集交付,我们提供全链路闭环服务,让高质量临床数据即拿即用。

⚡️ 需要原始数据或标注支持?联系我们获取定制方案。

帮我联系

下载信息

注册下载

需要注册 Kaggle 账号并登录后下载,适合需要跟踪下载记录和使用 API 的用户。

暂未开放

公开下载

无需注册即可直接获取公开样本或文档,适合快速预览和评估数据集质量。

免登录

当前数据集主要来源为 Kaggle 公开托管,完整影像包建议通过原始链接或 Kaggle API 获取。

免费样本无法满足模型训练要求?千方提供经三甲医院脱敏、带病理回证与专家标注的商业级专病数据集。

使用方式

数据集获取

git clone https://github.com/JoseAdrian3/NeuroEmbed.git

curl -L -o repo.zip https://github.com/JoseAdrian3/NeuroEmbed/archive/refs/heads/main.zip
unzip repo.zip

源站 README 摘录(使用方式)

NeuroEmbed

NeuroEmbed is an ontology-augmented embedding approach that transforms Gene Expression Omnibus (GEO) neurodegeneration studies into a coherent and searchable atlas. It aligns free-text metadata with biomedical ontologies and maps each cohort into a dense semantic space. NeuroEmbed allows researchers to express natural-language queries such as:

  • Show me Alzheimer’s disease RNA-Seq cohorts obtained from the human hippocampus.
  • Find Parkinson’s studies that profile dopaminergic neurons using single-cell assays.
  • I’'m interested in samples with male subjects using proteomic profiling by array data with huntington disease.
    Within milliseconds, NeuroEmbed returns ranked GEO accessions, enriched cohort descriptors, and direct links to the original records—eliminating the need for ad-hoc keyword tricks or manual spreadsheet filtering.
    NeuroEmbed is available here.
    NeuroEmbed repository is available here.
    NeuroEmbed uses a Streamlit interface. Users simply type a question, receive streamed results in the browser, and can drill down to sample-level details. The prototype runs on a fine-tuned PubMedBERT encoder trained on 368k question–cohort pairs. NeuroEmbed achieves a mean retrieval precision of 0.92 and resolves four-term queries with perfect accuracy across our 2,801 cohorts and 204.361 samples. Ongoing work is extending coverage to complete sample metadata and multi-omics signatures, so that future queries can combine clinical metadata with molecular similarity.
    For more information about the methodology behind NeuroEmbed, please see our preprint.

Screenshots

Below are example screenshots of NeuroEmbed in action:
Query example
Query example: Show me Alzheimer’'s disease RNA-Seq cohorts obtained from the human hippocampus.

Query example
Query example: Find Parkinson’'s studies that profile dopaminergic neurons using single-cell assays.

Query example
Query example: I’'m interested in samples with male subjects using proteomic profiling by array data with huntington disease.

数据加载示例(表格/文本类)

import pandas as pd, glob, os

files = (glob.glob(os.path.join(path, "**", "*.csv"), recursive=True)
       + glob.glob(os.path.join(path, "**", "*.tsv"), recursive=True)
       + glob.glob(os.path.join(path, "**", "*.xlsx"), recursive=True))
print("数据文件:", files)
df = pd.read_csv(files[0])
print(df.shape); print(df.columns.tolist()); print(df.head(3))

完整仓库:github.com/JoseAdrian3/NeuroEmbed

需要用于商业化训练或医疗器械注册(NMPA/FDA)?

公开数据往往缺乏完整的病理回证与专家标注。千方医数集依托陕川双基地与超十家三甲医院直连,提供完全合规、去标识化、支持注册级质控的专病数据集交易服务。