【3万患者11万图像14类病理】NIH公开大规模胸部X光数据集

简介:

image

胸部X光检查是最常见而且最具成本效益的医学影像检查之一。但是,胸部X光检查的临床诊断很具挑战性,有时被认为比胸部CT成像更难诊断。过去一些有前景的工作已经被报道过,特别是最近在结核病(TB)分类方面的深度学习工作。由于只有几千张图像被用于学习,在现实世界的医疗中,在胸部X光片的所有数据设置上,实现临床相关的计算机辅助检测和诊断(CAD)仍然是非常困难的,甚至是不可能的。

Openi 是迄今最大的公共胸部X射线数据集,由于只有4143张正面视图的胸部X光片,用于胸部疾病识别的深度神经网络的性能受到严重限制。

在这个数据库中,NIH提供了近期工作中使用数据集的一个增强版本(增加了6个疾病类别和更多的图像),规模大约是Openi的正面胸部X光片数量的27倍。所有数据集是从美国国家卫生临床中心的临床PACS数据库中提取出来的,其中包含了医院所有正面胸部X光片的约60%。

参与这项工作的NIH研究员吕乐博士告诉新智元,胸部X光图像去除病人敏感信息工作量非常大, 类比于在Google Street View里找到人脸和汽车牌照并把它模糊化。

据悉,发布这些数据前,NIH的研究人员通过人工和机器将其仔细审查了至少7遍,最后NIH内部还找了十几位博士生和医生,将11万张图像肉眼过了两遍。这都是为了让全世界的研究人员更好的工作,就像吕乐博士说的那样,“希望大家能够喜欢并enjoy!”

NIH研究人员预期这个数据集相比以前的胸部X光片数据集更能够代表真实的患者群体分布和现实中的临床诊断挑战。这个数据集的规模,从图像总数和胸腔疾病频率来看,也将会更好地促进深度神经网络的训练。

image

image

ChestX-ray数据集包含30,805名患者的112,120张正面视图的X射线图像,以及利用NLP从相关放射学报告挖掘的14类疾病的图像标签(每个图像可以有多个标签)。

数据集含有14类常见的胸部病理,包括肺不张、变实、浸润、气胸、水肿、肺气肿、纤维变性、积液、肺炎、胸膜增厚、心脏肥大、结节、肿块和疝气,这是王瀟崧博士和Yifan Peng、吕乐博士等人CVPR 2017论文中列出的8中常见疾病的扩充(详见下面ArXiv论文)。

CVPR-17 论文及地址:Wang X, Peng Y, Lu L, Lu Z, Bagheri M, Summers RM. ChestX-ray8: Hospital-scale Chest X-ray Database and Benchmarks on Weakly-Supervised Classification and Localization of Common Thorax Diseases. IEEE CVPR 2017(http://openaccess.thecvf.com/content_cvpr_2017/papers/Wang_ChestX-ray8_Hospital-Scale_Chest_CVPR_2017_paper.pdf
ArXiv论文,是CVPR-17论文的扩展,附录中含有14种疾病分布和数据集描述:https://arxiv.org/pdf/1705.02315.pdf
Box图像获取地址: https://nihcc.app.box.com/v/ChestXray-NIHCC

需要注意的是,由于许多原因,原始的放射学报告(与这些胸部X射线研究相关)并不公开分享。文本挖掘疾病标签的准确率预计>90%。

内容:

112120张正面视图的胸部X片图像,PNG格式,分辨率为1024 * 1024(在images文件夹)
所有图像的元数据(Data_Entry_2016.csv):图像索引,标签查找,跟踪#,患者ID,患者年龄,患者性别,以及图像位置。
约1000张图像的边框(BBox_List_2016.csv):图像索引,标签查找,Bbox [x,y,w,h]。[x y]是每个box的左上角的坐标。[w h]表示每个box的宽和高。

局限:

图像标签是利用NLP提取的,因此会出现一些错误的标签,但NLP标签的准确度估计为>90%。
疾病区域的边界框(bounding boxes)数量非常有限。
胸部X线放射学报告预计不会被公开分享。我们鼓励使用这个公共数据集的研究者和研究机构在以后的研究中共享“更新”的图像标签和/或新的边界盒,可能这些是通过人工注释的。

A:14类疾病的共同发生统计数据:

image

 A. 2 chest X-ray数据集中14种胸部疾病的共生矩阵(co-occurrence matrix)

image

B. 常见胸部疾病的8个可视化实例(略)

C.一个样本条目(请注意,原始的胸部x射线放射学报告是不公开分享的)

image

D.使用弱监督深度神经网络的两个疾病定位样本

image
image

以下是吕乐博士今年5月GTC演讲《构建真正大规模医学图像数据集:深度标签发现和开放端识别》的部分PPT,从中可以了解到本次NIH公布的大规模胸部X光数据集背后的具体工作。

image
image
image
image

在诊断中整合机器的决策对人类医生而言很难,好的医生不愿意用,不好的医生不知道怎么用。因此,必须要有更好的人机协作诊断过程。尤其是在精准医疗中,需要新的成像生物标记来更好的协助人类医生做出精准的判断,还需要具体到患者级别的相似度抽取系统,让个性化诊疗成为可能。

与此相关的有三大关键,一是计算机辅助检测和诊断,二是在医疗图像分析中的语义分割,三是在真正大规模数据集上的深度信息挖掘(包括文本和图像)。

image
image
image
image
image
image
image
image

在攻克放射医学问题的道路上,可用医学图像数据集稀少成了一个重大问题。而研究人员也一直致力于提供更好的解决方案。

image
image

王瀟崧博士、Yifan Peng、、Hoo-chang Shin、吕乐博士等人一直在从事相关的研究。

image
image
image
image

下面这篇CVPR-17论文就是本次NIH公布的X光图像数据集的基础。

image
image
image
image
image
image
image
image
image

在现有成果的基础上,我们也能看到未来的挑战和研究方向:提升图像标记的精度,提升多标签分类的精度,以及提升定位的精度。

挑战虽多,成果更大,也欢迎你的加入!

image
image
image
image
image
image

原文发布时间为:2017-10-01

本文作者: 闻菲

本文来自云栖社区合作伙伴“新智元”,了解相关信息可以关注“新智元”微信公众号

原文链接

相关文章
|
算法 数据库 计算机视觉
Dataset之COCO数据集:COCO数据集的简介、下载、使用方法之详细攻略
Dataset之COCO数据集:COCO数据集的简介、下载、使用方法之详细攻略
|
8月前
|
存储 数据采集 机器学习/深度学习
LIDC-IDRI肺结节数据集分割策略
本文介绍了使用LIDC-IDRI开源数据集进行肺癌检测项目的完整流程,包括数据预处理、训练分割模型和分类模型三个主要步骤。首先,下载包含患者DICOM文件的数据集;其次,克隆预处理代码并配置Pylidc库以生成肺部遮罩图像;最后,通过脚本准备数据集并创建元数据文件。文章还提供了相关GitHub资源链接,帮助读者更好地理解和实现项目。
1043 11
LIDC-IDRI肺结节数据集分割策略
|
10月前
|
存储 人工智能 搜索推荐
HealthGPT:你的AI医疗助手上线了:支持X光到病理切片,诊断建议+报告生成全自动
HealthGPT 是浙江大学联合阿里巴巴等机构开发的先进医学视觉语言模型,具备医学图像分析、诊断辅助和个性化治疗方案建议等功能。
1269 5
HealthGPT:你的AI医疗助手上线了:支持X光到病理切片,诊断建议+报告生成全自动
|
10月前
|
机器学习/深度学习 算法 搜索推荐
联邦学习的未来:深入剖析FedAvg算法与数据不均衡的解决之道
随着数据隐私和数据安全法规的不断加强,传统的集中式机器学习方法受到越来越多的限制。为了在分布式数据场景中高效训练模型,同时保护用户数据隐私,联邦学习(Federated Learning, FL)应运而生。它允许多个参与方在本地数据上训练模型,并通过共享模型参数而非原始数据,实现协同建模。
1131 0
|
机器学习/深度学习 算法 数据挖掘
CVPR2024 医学图像相关论文
CVPR2024医学图像相关论文汇总,涵盖图像重建、超分、配准、分割、生成、分类、联邦学习、预训练模型、视觉-语言模型及计算病理等多个领域。包括多项创新技术,如QN-Mixer、PrPSeg、MAPSeg等,涉及多个开源项目和代码。持续更新中,欢迎关注。原始GIT地址:https://github.com/MedAIerHHL/CVPR-MIA
1641 0
|
11月前
|
机器学习/深度学习 人工智能 算法
HuatuoGPT-o1:开源的医学推理大模型,通过复杂推理和强化学习提升医学问题解决能力
HuatuoGPT-o1 是香港中文大学与深圳大数据研究院联合推出的医学高级推理大模型,通过复杂推理和强化学习提升医学问题解决能力。
805 8
HuatuoGPT-o1:开源的医学推理大模型,通过复杂推理和强化学习提升医学问题解决能力
|
机器学习/深度学习 并行计算 PyTorch
从零开始下载torch+cu(无痛版)
这篇文章提供了一个详细的无痛版教程,指导如何从零开始下载并配置支持CUDA的PyTorch GPU版本,包括查看Cuda版本、在官网检索下载包名、下载指定的torch、torchvision、torchaudio库,并在深度学习环境中安装和测试是否成功。
从零开始下载torch+cu(无痛版)
|
机器学习/深度学习 数据采集 搜索推荐
深度学习之医学影像分类
基于深度学习的医学影像分类是利用深度学习模型对医学影像(如X光片、CT、MRI等)进行自动分类,以辅助医生进行疾病诊断和治疗决策。
644 0
|
计算机视觉
【YOLOv10训练教程】如何使用YOLOv10训练自己的数据集并且推理使用
【YOLOv10训练教程】如何使用YOLOv10训练自己的数据集并且推理使用