Chinese Medicine:AI赋能中医舌诊新范式

2025-06-24 吾乃喵大人 MedSci原创 发表于上海

本研究通过深度融合传统舌诊特征与深度学习提取的图像特征,构建了一套智能化、定量化的中医体质识别模型,展现出出色的性能和广泛的应用潜力。

中医体质是基于遗传、环境及生活习惯等多因素形成的人体固有生理特征,对疾病的发生发展具有重要影响。传统体质辨识主要依赖“望闻问切”四诊结合和《中医体质分类与判定标准》(CCMQ)的问卷,尽管实用但容易受限于主观因素以及问卷设计复杂,且难以满足现代大规模、精准化需求。

其中,舌诊作为中医诊断中的重要窗口,反映了个体体质在舌色、舌形、舌苔等方面的特征。现代研究已证实,舌像信息可捕捉机体功能状态的细微变化,但如何客观、精准且高效地量化舌诊信息,已成为推动中医数字化和智能化的关键瓶颈。

同时,深度学习因其在医学图像分割与分类方面优越的特征提取和模式识别能力,逐步成为中医舌诊自动化分析的有力工具,然而当前多限于单一特征体系,且缺乏多中心大数据验证,尚未充分发挥其优势。

 

本研究以1374名来自北京两大中医院的成年人为对象,收集标准化、高分辨率舌像及CCMQ体质评估数据,涵盖平和、气虚、阳虚、湿热、气郁5种高频体质类型。采用ISE-UNet++改进网络对舌图进行精确分割,消除背景干扰,随后提取传统颜色(Lab色彩空间)、纹理(GLCM)等视觉特征及基于ResNet-50的2048维深度特征。

通过LASSO回归与随机森林算法,结合双重筛选机制优化特征集。结合8类机器学习算法,对基于单一及融合特征的数据集分别训练评估模型,最终选定性能最佳的MLP模型构建多模态融合分类器,并采用训练/测试集划分及五折交叉验证确保模型稳健性。

研究结果

1. 受试者基本信息

体质类型 样本量(N) 平均年龄(岁) 性别分布(女/男)
平和 380 50 ± 12 161 / 219
气虚 248 50 ± 12 139 / 109
阳虚 449 50 ± 10 295 / 154
湿热 152 48 ± 10 46 / 106
气郁 145 46 ± 11 109 / 36

统计检验,性别与整体体质类型存在总体相关性(p <0.0001),但单体质类型间无显著差异。性别作为控制变量纳入模型。

2. 舌像分割性能提升

采用ISE-UNet++较传统UNet++和UNet模型,在舌像分割任务中取得指标提升:

模型 MIoU (%) MPA (%) 准确率 (%)
UNet 97.73 97.95 98.26
UNet++ 97.91 98.24 98.31
ISE-UNet++ 98.45 99.26 99.17

舌像分割模型架构及示例结果

3. 传统与深度特征筛选

  • 传统特征筛选:LASSO回归与随机森林筛选交集确定11个关键舌色、舌形及质地指标,显示稳定且预测价值高。
  • 深度特征筛选:从2048维深度特征中筛选出26项重要特征,涵盖视觉纹理、局部和全局形态特征,补充传统特征难以覆盖的细节差异。

传统特征筛选结果

深度特征筛选结果

4. 模型性能比较与融合显著提升

采用8种机器学习算法分别评估传统特征和深度特征模型,关键指标如下(以多层感知机 MLP 为例):

特征类型 准确率 灵敏度 特异度 AUC
传统特征 0.394 0.275 0.827 0.629
深度特征 0.715 0.659 0.924 0.876

单特征建模效果有限,融合特征模型性能显著提升:

训练集:

指标 结果
准确率 0.813
灵敏度 0.761
特异度 0.949
AUC 0.948

测试集:

指标 结果
准确率 0.737
灵敏度 0.680
特异度 0.930
AUC 0.898

融合特征MLP模型结构及特征重要性

融合模型五折交叉验证ROC曲线

5. 模型可解释性分析

基于Grad-CAM可视化技术,模型对不同体质的重点舌像区域识别出典型中医病理标志,如:

  • 气虚体质:突出舌中央裂纹,反映脾胃虚弱;
  • 阳虚体质:突出舌边缘齿痕,指向阳气不足伴湿困;
  • 湿热体质:突出黄腻舌苔,显示湿热下注;
  • 气郁体质:突出舌尖红斑,关联心火亢盛或肝气郁结。

Grad-CAM热力图示例

研究意义与展望

本研究构建的基于多模态融合的中医体质识别模型,实现了舌像信息的自动化、高精度分析,突破了传统依赖主观经验和复杂问卷的弊端,具有良好的泛化能力和解释性。该模型结合前沿深度学习技术与传统中医诊断理念,不仅丰富了中医数字化的技术手段,也为个性化健康管理和精准中医提供了切实可行的智能辅助工具。

未来,研究可沿以下方向拓展:

  • 数据多样性增强:扩大多中心样本规模,拓展不同地域、民族及体质稀缺类型的覆盖,提升模型的普适性。
  • 多维度信息融合:集成舌像、脉象、面色及体征等多模态信息,打造更全面的体质识别系统。
  • 临床应用转化:结合移动端智能设备,实现家庭自助舌诊和远程健康监测,提升医疗服务的便捷性和普及度。
  • 机制解析加强:深化基于AI的病理特征解读,助力揭示中医体质与疾病演变的内在机理。

梅斯小编点评

这项研究深刻展示了人工智能与传统中医智慧融合的巨大潜力。通过融合定性传统特征与定量深度特征,团队成功解决了体质识别难题中信息表达不足与泛化能力差的痛点。精心设计的多中心大样本前瞻性队列,使得成果更具说服力,同时Grad-CAM强化了模型的临床可解释性,极大地推动了AI在中医领域的实际应用。

未来,随着更多样本和多元表型数据的引入,配合高性能计算和优化模型,期待实现真正基于全息健康数据的智能体质识别,服务精准中医和个体化健康管理。这不仅是技术的进步,更是中医现代化和国际化的重要里程碑。

原始出处

Liu Y, Fan L, Zhao M, Wei D, Zhao M, Dong Y, Zhang X. Study on a Traditional Chinese Medicine constitution recognition model using tongue image characteristics and deep learning: a prospective dual-center investigation. Chin Med. 2025 Jun 12;20(1):84. doi: 10.1186/s13020-025-01126-w. PMID: 40506765; PMCID: PMC12160370.

相关资料下载:
[AttachmentFileName(sort=1, fileName=s13020-025-01126-w.pdf)] GetArticleByIdResponse(id=6942883935d0, projectId=1, sourceId=null, title=Chinese Medicine:AI赋能中医舌诊新范式, articleFrom=MedSci原创, journalId=12223, copyright=原创, creationTypeList=[1], summary=本研究通过深度融合传统舌诊特征与深度学习提取的图像特征,构建了一套智能化、定量化的中医体质识别模型,展现出出色的性能和广泛的应用潜力。, cover=https://img.medsci.cn/20240510/1715335067940_5579292.png, authorId=0, author=吾乃喵大人, originalUrl=, linkOutUrl=, content=<p>中医体质是基于遗传、环境及生活习惯等多因素形成的人体固有生理特征,对疾病的发生发展具有重要影响。传统体质辨识主要依赖&ldquo;望闻问切&rdquo;四诊结合和《中医体质分类与判定标准》(CCMQ)的问卷,尽管实用但容易受限于主观因素以及问卷设计复杂,且难以满足现代大规模、精准化需求。</p> <p>其中,舌诊作为中医诊断中的重要窗口,反映了个体体质在舌色、舌形、舌苔等方面的特征。现代研究已证实,舌像信息可捕捉机体功能状态的细微变化,但如何客观、精准且高效地量化舌诊信息,已成为推动中医数字化和智能化的关键瓶颈。</p> <p>同时,深度学习因其在医学图像分割与分类方面优越的特征提取和模式识别能力,逐步成为中医舌诊自动化分析的有力工具,然而当前多限于单一特征体系,且缺乏多中心大数据验证,尚未充分发挥其优势。</p> <p><span style="color: #333333;"><img style="display: block; margin-left: auto; margin-right: auto;" src="https://img.medsci.cn/20250623/1750663864224_8106296.png" /></span></p> <p>&nbsp;</p> <p>本研究以1374名来自北京两大中医院的成年人为对象,收集标准化、高分辨率舌像及CCMQ体质评估数据,涵盖平和、气虚、阳虚、湿热、气郁5种高频体质类型。采用ISE-UNet++改进网络对舌图进行精确分割,消除背景干扰,随后提取传统颜色(Lab色彩空间)、纹理(GLCM)等视觉特征及基于ResNet-50的2048维深度特征。</p> <p>通过LASSO回归与随机森林算法,结合双重筛选机制优化特征集。结合8类机器学习算法,对基于单一及融合特征的数据集分别训练评估模型,最终选定性能最佳的MLP模型构建多模态融合分类器,并采用训练/测试集划分及五折交叉验证确保模型稳健性。</p> <p><strong>研究结果</strong></p> <p>1. 受试者基本信息</p> <table style="margin-left: auto; margin-right: auto;"> <thead> <tr> <th>体质类型</th> <th>样本量(N)</th> <th>平均年龄(岁)</th> <th>性别分布(女/男)</th> </tr> </thead> <tbody> <tr> <td>平和</td> <td>380</td> <td>50 &plusmn; 12</td> <td>161 / 219</td> </tr> <tr> <td>气虚</td> <td>248</td> <td>50 &plusmn; 12</td> <td>139 / 109</td> </tr> <tr> <td>阳虚</td> <td>449</td> <td>50 &plusmn; 10</td> <td>295 / 154</td> </tr> <tr> <td>湿热</td> <td>152</td> <td>48 &plusmn; 10</td> <td>46 / 106</td> </tr> <tr> <td>气郁</td> <td>145</td> <td>46 &plusmn; 11</td> <td>109 / 36</td> </tr> </tbody> </table> <p>经<a href="https://www.medsci.cn/search?q=%E7%BB%9F%E8%AE%A1">统计</a>检验,性别与整体体质类型存在总体相关性(p &lt;0.0001),但单体质类型间无显著差异。性别作为控制变量纳入模型。</p> <p>2. 舌像分割性能提升</p> <p>采用ISE-UNet++较传统UNet++和UNet模型,在舌像分割任务中取得指标提升:</p> <table style="margin-left: auto; margin-right: auto;"> <thead> <tr> <th>模型</th> <th>MIoU (%)</th> <th>MPA (%)</th> <th>准确率 (%)</th> </tr> </thead> <tbody> <tr> <td>UNet</td> <td>97.73</td> <td>97.95</td> <td>98.26</td> </tr> <tr> <td>UNet++</td> <td>97.91</td> <td>98.24</td> <td>98.31</td> </tr> <tr> <td>ISE-UNet++</td> <td>98.45</td> <td>99.26</td> <td>99.17</td> </tr> </tbody> </table> <p style="text-align: center;"><img src="https://img.medsci.cn/20250623/1750663864233_8106296.png" /></p> <p style="text-align: center;">舌像分割模型架构及示例结果</p> <p>3. 传统与深度特征筛选</p> <ul> <li>传统特征筛选:LASSO回归与随机森林筛选交集确定11个关键舌色、舌形及质地指标,显示稳定且预测价值高。</li> <li>深度特征筛选:从2048维深度特征中筛选出26项重要特征,涵盖视觉纹理、局部和全局形态特征,补充传统特征难以覆盖的细节差异。</li> </ul> <p><img src="https://img.medsci.cn/20250623/1750663864239_8106296.png" /></p> <p style="text-align: center;">传统特征筛选结果</p> <p style="text-align: center;"><img src="https://img.medsci.cn/20250623/1750663864251_8106296.png" /></p> <p style="text-align: center;">深度特征筛选结果</p> <p>4. 模型性能比较与融合显著提升</p> <p>采用8种机器学习算法分别评估传统特征和深度特征模型,关键指标如下(以多层感知机 MLP 为例):</p> <table style="margin-left: auto; margin-right: auto;"> <thead> <tr> <th>特征类型</th> <th>准确率</th> <th>灵敏度</th> <th>特异度</th> <th>AUC</th> </tr> </thead> <tbody> <tr> <td>传统特征</td> <td>0.394</td> <td>0.275</td> <td>0.827</td> <td>0.629</td> </tr> <tr> <td>深度特征</td> <td>0.715</td> <td>0.659</td> <td>0.924</td> <td>0.876</td> </tr> </tbody> </table> <p>单特征建模效果有限,融合特征模型性能显著提升:</p> <p>训练集:</p> <table style="margin-left: auto; margin-right: auto;"> <thead> <tr> <th>指标</th> <th>结果</th> </tr> </thead> <tbody> <tr> <td>准确率</td> <td>0.813</td> </tr> <tr> <td>灵敏度</td> <td>0.761</td> </tr> <tr> <td>特异度</td> <td>0.949</td> </tr> <tr> <td>AUC</td> <td>0.948</td> </tr> </tbody> </table> <p>测试集:</p> <table style="margin-left: auto; margin-right: auto;"> <thead> <tr> <th>指标</th> <th>结果</th> </tr> </thead> <tbody> <tr> <td>准确率</td> <td>0.737</td> </tr> <tr> <td>灵敏度</td> <td>0.680</td> </tr> <tr> <td>特异度</td> <td>0.930</td> </tr> <tr> <td>AUC</td> <td>0.898</td> </tr> </tbody> </table> <p style="text-align: center;"><img src="https://img.medsci.cn/20250623/1750663864258_8106296.png" /></p> <p style="text-align: center;">融合特征MLP模型结构及特征重要性</p> <p><img style="display: block; margin-left: auto; margin-right: auto;" src="https://img.medsci.cn/20250623/1750663864264_8106296.png" /></p> <p style="text-align: center;">融合模型五折交叉验证ROC曲线</p> <p>5. 模型可解释性分析</p> <p>基于Grad-CAM可视化技术,模型对不同体质的重点舌像区域识别出典型中医病理标志,如:</p> <ul> <li><strong>气虚体质</strong>:突出舌中央裂纹,反映脾胃虚弱;</li> <li><strong>阳虚体质</strong>:突出舌边缘齿痕,指向阳气不足伴湿困;</li> <li><strong>湿热体质</strong>:突出黄腻舌苔,显示湿热下注;</li> <li><strong>气郁体质</strong>:突出舌尖红斑,关联心火亢盛或肝气郁结。</li> </ul> <p><img style="display: block; margin-left: auto; margin-right: auto;" src="https://img.medsci.cn/20250623/1750663864271_8106296.png" /></p> <p style="text-align: center;">Grad-CAM热力图示例</p> <p><strong>研究意义与展望</strong></p> <p>本研究构建的基于多模态融合的中医体质识别模型,实现了舌像信息的自动化、高精度分析,突破了传统依赖主观经验和复杂问卷的弊端,具有良好的泛化能力和解释性。该模型结合前沿深度学习技术与传统中医诊断理念,不仅丰富了中医数字化的技术手段,也为个性化健康管理和精准中医提供了切实可行的智能辅助工具。</p> <p>未来,研究可沿以下方向拓展:</p> <ul> <li><strong>数据多样性增强</strong>:扩大多中心样本规模,拓展不同地域、民族及体质稀缺类型的覆盖,提升模型的普适性。</li> <li><strong>多维度信息融合</strong>:集成舌像、脉象、面色及体征等多模态信息,打造更全面的体质识别系统。</li> <li><strong>临床应用转化</strong>:结合移动端智能设备,实现家庭自助舌诊和远程健康监测,提升医疗服务的便捷性和普及度。</li> <li><strong>机制解析加强</strong>:深化基于AI的病理特征<a href="https://www.medsci.cn/guideline/list.do?q=%E8%A7%A3%E8%AF%BB">解读</a>,助力揭示中医体质与疾病演变的内在机理。</li> </ul> <p><strong>梅斯小编点评</strong></p> <p>这项研究深刻展示了人工智能与传统中医智慧融合的巨大潜力。通过融合定性传统特征与定量深度特征,团队成功解决了体质识别难题中信息表达不足与泛化能力差的痛点。精心设计的多中心大样本前瞻性队列,使得成果更具说服力,同时Grad-CAM强化了模型的临床可解释性,极大地推动了AI在中医领域的实际应用。</p> <p>未来,随着更多样本和多元表型数据的引入,配合高性能计算和优化模型,期待实现真正基于全息健康数据的智能体质识别,服务精准中医和个体化健康管理。这不仅是技术的进步,更是中医现代化和国际化的重要里程碑。</p> <p><span style="font-size: 12px; color: #808080;">原始出处</span></p> <p><span style="color: #808080; font-size: 12px;">Liu Y, Fan L, Zhao M, Wei D, Zhao M, Dong Y, Zhang X. Study on a Traditional Chinese Medicine constitution recognition model using tongue image characteristics and deep learning: a prospective dual-center investigation. Chin Med. 2025 Jun 12;20(1):84. doi: 10.1186/s13020-025-01126-w. PMID: 40506765; PMCID: PMC12160370.</span></p>, belongTo=, tagList=[TagDto(tagId=16297, tagName=深度学习), TagDto(tagId=487691, tagName=舌诊)], categoryList=[CategoryDto(categoryId=37, categoryName=中医科, tenant=100), CategoryDto(categoryId=84, categoryName=研究进展, tenant=100), CategoryDto(categoryId=20656, categoryName=梅斯医学, tenant=100)], articleKeywordId=0, articleKeyword=, articleKeywordNum=6, guiderKeywordId=0, guiderKeyword=, guiderKeywordNum=6, opened=1, paymentType=1, paymentAmount=0, recommend=0, recommendEndTime=null, sticky=0, stickyEndTime=null, allHits=1467, appHits=3, showAppHits=0, pcHits=119, showPcHits=1464, likes=0, shares=0, comments=0, approvalStatus=1, publishedTime=Tue Jun 24 09:17:00 CST 2025, publishedTimeString=2025-06-24, pcVisible=1, appVisible=1, editorId=6556171, editor=中医科新前沿, waterMark=0, formatted=0, deleted=0, version=6, createdBy=49478106296, createdName=吾乃喵大人, createdTime=Mon Jun 23 15:32:17 CST 2025, updatedBy=92910, updatedName=rayms, updatedTime=Mon Jun 23 22:17:42 CST 2025, ipAttribution=上海, attachmentFileNameList=[AttachmentFileName(sort=1, fileName=s13020-025-01126-w.pdf)], guideDownload=1, surveyId=null, surveyIdStr=null, surveyName=null, pushMsXiaoZhi=true, qaList=[{id=722729, encryptionId=df05e22729db, articleId=6942883935d0, userName=administrator, question=中医体质如何通过舌像反映?, answer=研究表明,不同中医体质在舌色、舌形、舌苔等方面具有独特特征。例如,气虚体质表现为舌中央裂纹,阳虚体质有舌边缘齿痕,湿热体质呈现黄腻舌苔,气郁体质则常见舌尖红斑。这些特征可通过深度学习模型精准识别。, clickNum=0, type=article, createdAt=1750688293568, updatedAt=1750688293568}, {id=722735, encryptionId=30a6e2273582, articleId=6942883935d0, userName=administrator, question=研究样本有哪些局限性?, answer=样本仅来自北京两大医院1374名成年人,覆盖平和、气虚等5种高频体质(如湿热仅152例)。未来需扩展多中心、稀缺体质及不同地域人群以提升普适性。, clickNum=0, type=article, createdAt=1750688293568, updatedAt=1750688293568}])
s13020-025-01126-w.pdf
评论区 (1)
#插入话题
  1. [GetPortalCommentsPageByObjectIdResponse(id=2270596, encodeId=0e2522e059696, content=<a href='/topic/show?id=e4cb6612395' target=_blank style='color:#2F92EE;'>#深度学习#</a> <a href='/topic/show?id=7387112303b4' target=_blank style='color:#2F92EE;'>#舌诊#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=16, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=66123, encryptionId=e4cb6612395, topicName=深度学习), TopicDto(id=112303, encryptionId=7387112303b4, topicName=舌诊)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=cade5395722, createdName=梅斯管理员, createdTime=Mon Jun 23 22:17:42 CST 2025, time=2025-06-23, status=1, ipAttribution=上海)]
    2025-06-23 梅斯管理员 来自上海

相关资讯

European Radiology:基于深度学习的MR血管壁图像中动脉血管壁和斑块的自动分割定量评估

近年来,基于深度学习的算法(如卷积神经网络(CNN)模型)在医学感兴趣区域(ROI)分割中表现优异。

European Radiology:高分辨率深度学习重建提高CT分流储量的精度

评估中度狭窄的功能意义对确定是否需进行血运重建至关重要。基于 CT 数据计算的血流储备分数(CT-FFR)已被推荐用于评估功能严重程度,其通过计算流体动力学(CFD)来计算冠状动脉血压。

Heart:眼底图像 AI 算法精准识别冠状动脉疾病患者轻度认知障碍

轻度认知障碍(MCI)最常见于60岁以上的人群,患病率约为16%-20%。该研究中基于眼底图像训练的人工智能算法在筛查CAD人群MCI方面表现良好,可能是一种无创、有效的疾病早期诊断替代方法。

Science:突破性进展:深度学习+物理模拟,精准操控蛋白质“形态切换”,未来药物设计新路径

这不仅仅是蛋白质设计领域的一次技术飞跃,更是为构建未来生物计算、智能药物递送,乃至全新生命系统奠定了坚实的基础。

European Radiology:深度学习重建联合双低剂量CT肺血管造影的对比增强检查

DLR 联合 CE - boost 技术可在降低辐射和对比剂剂量的情况下显著改善 CTPA 的图像质量,有助于更准确地诊断肺栓塞。

European Radiology:基于深度学习内核转换技术对CT进行更精确的气道量化

近年来深度学习(DL)算法在包括图像归一化在内的多种医学影像应用中取得成功,基于 DL 的图像归一化技术旨在降低不同图像间的测量变异性,其在减轻成像协议差异影响、提高测量一致性方面具有巨大潜力。