...據(jù)報道,沙特阿拉伯阿卜杜拉國王科技大學(xué)的科研工作者已經(jīng)開發(fā)出一種系統(tǒng)歧沪,可以讓您通過上傳自己的皮膚照片自動進行皮膚病診斷歹撒!
具有自動判斷特征和類別、進行分析诊胞、提出處理方法的功能暖夭。
它是第一個使用大規(guī)模皮膚病圖像和醫(yī)生筆記進行微調(diào)的LLM皮膚病診斷系統(tǒng)。
重要的是,該論文指出該系統(tǒng)可以在本地部署迈着,從而保護用戶隱私竭望。
參考論文信息
標(biāo)題:SkinGPT-4:具有視覺大語言模型的交互式皮膚病診斷系統(tǒng)
作者:周覺曉、高欣
網(wǎng)址:https://arxiv.org/abs/2304.10691
口袋里的皮膚科醫(yī)生
皮膚和皮下疾病在全球非致命性疾病的負擔(dān)中名列前茅裕菠,影響了相當(dāng)一部分人口咬清。然而,皮膚病診斷領(lǐng)域面臨著三個重大障礙奴潘。首先旧烧,特別是在農(nóng)村地區(qū),缺乏可用于診斷病人的皮膚科醫(yī)生画髓。其次粪滤,準(zhǔn)確解釋皮膚病圖像是一個相當(dāng)大的挑戰(zhàn)。最后雀扶,對皮膚科醫(yī)生來說杖小,生成方便病人的診斷報告通常是一項耗時和勞動密集型的任務(wù)。為了應(yīng)對這些挑戰(zhàn)愚墓,我們提出了SkinGPT-4予权,它是世界上第一個由先進的視覺大語言模型驅(qū)動的互動式皮膚病診斷系統(tǒng)。SkinGPT-4利用MiniGPT-4的微調(diào)版本浪册,在大量的皮膚病圖像(包括52,929張公開的和專有的圖像)以及臨床概念和醫(yī)生筆記上進行訓(xùn)練扫腺。我們設(shè)計了一個兩步的訓(xùn)練過程,使SkinGPT-4能夠用自然語言表達皮膚病圖像中的醫(yī)學(xué)特征村象,并對皮膚病的類型做出準(zhǔn)確的診斷笆环。通過SkinGPT-4,用戶可以上傳自己的皮膚照片進行診斷厚者,系統(tǒng)可以自主評估圖像躁劣,識別皮膚病的特征和類別,進行深入分析库菲,并提供互動的治療建議账忘。同時,SkinGPT-4的本地部署能力和對用戶隱私的承諾也使它成為尋求可靠和精確的皮膚病診斷的病人的一個有吸引力的選擇熙宇。為了證明SkinGPT-4的穩(wěn)健性鳖擒,我們對150個真實案例進行了定量評估,這些案例由經(jīng)過認證的皮膚科醫(yī)生獨立審查烫止,結(jié)果表明SkinGPT-4可以提供準(zhǔn)確的皮膚病診斷蒋荚。雖然SkinGPT-4不能替代醫(yī)生,但它可以提高用戶對其醫(yī)療狀況的理解馆蠕,促進改善病人和醫(yī)生之間的溝通期升,加快皮膚科醫(yī)生的診斷過程广鳍,并有可能促進以人為本的護理和不發(fā)達地區(qū)的醫(yī)療公平。