MedConceptsQA是一个专用于医学概念问答的开源基准测试集。该基准包含跨不同医学词汇体系(诊断、操作和药物)的多层次医学概念问题。问题按难度分为三个等级:简单、中等和困难。我们使用多种大语言模型对该基准进行了评估。本基准测试集为评估大语言模型解释医学编码和区分医学概念的能力提供了宝贵资源。
xianweichengxiang解剖结构 | 不适用 |
解剖区域 | 不适用 |
数据量 | 820,000 |
文件格式 | .arrow格式 |
统计类型 | 间距 (mm) | 尺寸 |
---|---|---|
最小值 | 不适用 |
不适用 |
中位值 | 不适用 |
不适用 |
最大值 | 不适用 |
不适用 |
@article{SHOHAM2024109089,
title = {MedConceptsQA: Open source medical concepts QA benchmark},
journal = {Computers in Biology and Medicine},
volume = {182},
pages = {109089},
year = {2024},
issn = {0010-4825},
doi = {https://doi.org/10.1016/j.compbiomed.2024.109089},
url = {https://www.sciencedirect.com/science/article/pii/S0010482524011740},
author = {Ofir Ben Shoham and Nadav Rappoport}