公开(公告)号：CN116959713A

公开(公告)日：2023-10-27

申请号：CN202310941939.7

申请日：2023-07-28

Applicant: 上海中医药大学

Inventor： 向延卫 ,  谢青宇 ,  陈筱雷 ,  钱凌 ,  沈宇宏 ,  蒯仂 ,  孙璐 ,  朱玮 ,  张海棠 ,  王婕 ,  乔云笑 ,  何清怡

IPC: G16H50/20 ,  G06V10/764 ,  G06V10/774 ,  G06F18/25

Abstract: 本发明公开了一种基于多模态数据的银屑病和湿疹检测方法、系统、装置，通过APP或Web方式部署，采用实时和非实时两种模式，实时模式用户对皮肤进行拍照上传，系统利用目标检测模型进行皮损范围和类型识别，初步判断是银屑病还是湿疹疾病；非实时模式利用人工智能生成内容技术，提供病患和系统的聊天界面，系统在和病患交互过程中自动生成皮肤病人主诉中的银屑病和湿疹的医学特征信息，将特征信息转成提示词输入文字转图像模型，自动生成多个银屑病/湿疹的样本图片，将这些样本图片作为训练数据基于迁移学习技术重新快速训练目标检测模型，并利用新模型重新对病人皮肤图片进行二次检测，并将结果和实时检测结果融合，为用户输出更准确的病情信息。