近日鹦倚，一項(xiàng)名為IDM-VTON的虛擬試衣技術(shù)引起了廣泛關(guān)注河质。這項(xiàng)技術(shù)能夠生成高度真實(shí)的虛擬試衣圖像，其細(xì)節(jié)處理之精細(xì)震叙，令人贊嘆不已掀鹅。
IDM-VTON技術(shù)的核心在于其對(duì)服裝細(xì)節(jié)的精準(zhǔn)捕捉。無論是紋理媒楼、圖案還是縫線乐尊，這些細(xì)微之處都能在試衣圖像中得到準(zhǔn)確的再現(xiàn)。這種對(duì)細(xì)節(jié)的高度還原划址，使得用戶在試衣時(shí)能夠更加真實(shí)地感受到衣物的質(zhì)感和設(shè)計(jì)扔嵌。
注：一鍵包較大对人，安裝包20G左右，解壓出來30G左右拂共，請(qǐng)確保有足夠的磁盤空間牺弄。
顯卡要求也較高，建議N卡12G顯存起使用宜狐。如沒有硬件势告，可以使用在線體驗(yàn)，在帖子下方有地址抚恒。
先看兩張官方的演示動(dòng)圖
測(cè)試了幾天遗遵，效果是真的好萍恕，比之前的?Anydoor?無論效果還是操作要好很多，而且不用像之前的項(xiàng)目车要，手動(dòng)畫衣服遮罩范圍允粤。這個(gè)大部分直接自動(dòng)識(shí)別。
我用RTX3060 12G顯存實(shí)測(cè)下來翼岁，出一張圖要12分鐘类垫。實(shí)在太吃顯卡了，看了網(wǎng)上的評(píng)測(cè)琅坡，這項(xiàng)目在3090和4090等高端卡出圖很快悉患，幾十秒就能出來。
光說不練不行啊
下面簡(jiǎn)單說下使用方法：
操作很簡(jiǎn)單榆俺，首先上傳一張圖片购撼，就是模特圖片
然后上傳一張需要換的衣服的圖，建議圖片尺寸768*1024谴仙，最好是3：4的比例，如果尺寸是正方形的碾盐，就要勾選下方的“自動(dòng)裁切”
模特圖下方有幾個(gè)工具按鈕毫玖，主要是手動(dòng)畫遮罩的筆刷和橡皮工具掀虎，如下圖，分別是返回照片場(chǎng)景付枫、裁切烹玉、筆刷、橡皮
如果是簡(jiǎn)單的衣服場(chǎng)景，可以先用“自動(dòng)遮罩”功能掂榔，默認(rèn)是勾選的继效，能自動(dòng)識(shí)別大部分常見的衣服，無需手動(dòng)畫装获，如下圖
服裝圖下方穴豫，有個(gè)溫馨的功能提示詞區(qū)域凡简，可以手動(dòng)輸入提示詞，幫助程序更精準(zhǔn)的識(shí)別衣服，比如輸入 Dress秤涩，就是告訴AI帜乞，這是連衣裙，如下圖
所有參數(shù)設(shè)置完成后，就可以直接點(diǎn)下方的“試穿”按鈕浊竟，接下來就是漫長(zhǎng)的等待了怨喘，根據(jù)自己的顯卡，時(shí)間從幾十秒到十幾分鐘不等振定。
最終出來的效果還是很贊的必怜，如下圖
注：上圖換的是白色T恤梳庆，因?yàn)橹型疚覟榱搜菔荆苑b換了紅色連衣裙卑惜。
目前項(xiàng)目加載的模型太多膏执，加載速度和生成速度都略慢，看來還需要很多優(yōu)化露久，期待作者早日解決這些問題更米。
如果你沒有硬件條件使用，可以訪問下方網(wǎng)址在線體驗(yàn)毫痕，需要魔法上網(wǎng)征峦。
試用地址：https://huggingface.co/spaces/yisol/IDM-VTON
試用了幾輪下來，換裝效果的確不錯(cuò)消请，但也有一些瑕疵栏笆，比如換裝后有時(shí)會(huì)出現(xiàn)大花臂、衣服上的字體沒有很好地還原臊泰、手部變形蛉加。
上面展示的虛擬試衣技術(shù)由韓國(guó)科學(xué)技術(shù)院 (KAIST) 、 OMNIOUS.AI 共同打造缸逃，他們提出了一種新型擴(kuò)散模型七婴，該技術(shù)在提高服裝保真度的同時(shí)，還能生成真實(shí)的視覺效果察滑。
技術(shù)特點(diǎn):
高度真實(shí)感: IDM-VTON生成的試衣圖像細(xì)節(jié)精細(xì)打厘，為用戶帶來接近現(xiàn)實(shí)的試衣體驗(yàn)。
復(fù)雜背景處理: 即便在戶外或背景復(fù)雜的場(chǎng)景中贺辰，該技術(shù)也能準(zhǔn)確展示衣物的試穿效果户盯，保持圖像的高質(zhì)量嵌施。
一致性保持: 在不同人物模型上展示同一件服裝時(shí)，IDM-VTON能夠保持服裝細(xì)節(jié)的一致性莽鸭，確保無論在何種體型或姿態(tài)下吗伤，服裝的呈現(xiàn)效果都保持高度一致。
紋理與圖案精確再現(xiàn): 該技術(shù)特別擅長(zhǎng)捕捉服裝的紋理和圖案硫眨，即使是最微小的裝飾也能在試衣圖像中得到準(zhǔn)確反映足淆。
應(yīng)用場(chǎng)景:
IDM-VTON的虛擬試衣技術(shù)可以廣泛應(yīng)用于時(shí)尚零售、個(gè)性化服裝設(shè)計(jì)礁阁、在線試衣間以及增強(qiáng)現(xiàn)實(shí)（AR）試衣體驗(yàn)等多個(gè)領(lǐng)域巧号。它不僅為消費(fèi)者提供了便捷的試衣方式，也為服裝設(shè)計(jì)師和零售商提供了一種全新的展示和銷售手段姥闭。
技術(shù)優(yōu)勢(shì):
用戶無需親自試穿丹鸿，即可預(yù)覽服裝在不同場(chǎng)景和不同體型上的效果。
零售商可以節(jié)省實(shí)體試衣間的成本棚品，同時(shí)提供更多樣化的試衣體驗(yàn)靠欢。
設(shè)計(jì)師可以通過虛擬試衣快速獲取反饋，優(yōu)化服裝設(shè)計(jì)铜跑。
