#多模态大语言模型

白内障精细分级与诊断图像数据集

白内障是全球致盲的主要原因之一。尽管深度学习在辅助白内障诊断方面显示出潜力，但现有方法通常仅提供二元评估，而临床实践需要多级严重程度评估和相应的诊断建议。本研究构建了包含187个眼底图像案例的白内障严重程度和诊断图像数据集（CSDI），每个案例均附有详细的临床诊断报告。此外，研究提出了一种基于多模态大语言模型（MLLM）的诊断框架，能够从眼底图像中进行精细的严重程度评分，并生成专业的诊断文本。这是首次将MLLM技术应用于精确定量的白内障诊断。通过在CSDI上对几种最先进的MLLM进行基准测试，验证了该数据集注释的高质量。