2024-06-27 comfyui企業(yè)級應(yīng)用遇到的問題

comfyui:通過工作流創(chuàng)建任務(wù)瞬沦,完成任務(wù)。常用于文生圖雇锡,圖生圖逛钻,文生視頻,圖生視頻锰提,圖片绣的,視頻風(fēng)格遷移,換臉欲账,高清化屡江,。各種功能需要對應(yīng)的模型及插件實現(xiàn)赛不。
api: comfyapi提供功能包含:system_info(系統(tǒng)狀態(tài))惩嘉,get prompt(查詢當前任務(wù)數(shù)),post prompt(提交任務(wù))踢故,history(查詢完成任務(wù)詳情(如果未完成返回空對象))
企業(yè)級應(yīng)用面臨的挑戰(zhàn):
可用性文黎,可擴展性,高并發(fā)殿较,安全性耸峭,合規(guī)性,國際化淋纲。
comfyui 單節(jié)點:同時只能運行一個任務(wù)劳闹,在執(zhí)行任務(wù)期間,新增的任務(wù)會自動添加到任務(wù)隊列。由于某型模型在特殊參數(shù)下會占用大量算力資源本涕,可能會造成服務(wù)崩潰业汰,存在任務(wù)丟失系統(tǒng)不可用的隱患。

comfyui集群:comfyui集群可以很好的解決高并發(fā)菩颖,可用性問題样漆。但由于comfyui的任務(wù)都是異步任務(wù),給擴展性帶來了幾點挑戰(zhàn)晦闰。
1.當一個任務(wù)提交到某個節(jié)點放祟,可后續(xù)如果查詢到另外的節(jié)點則會查不到任務(wù)。


任務(wù)不同步.png
  1. 當任務(wù)量突增后又開始驟減呻右,集群節(jié)點的伸縮也是問題跪妥,可能出現(xiàn)某老節(jié)點存在大量任務(wù)堆積,但新節(jié)點只能分配個別任務(wù)窿冯。合適的擴縮容器時機也難以把控。


    伸縮.png
  2. 在集群擴容時确徙,啟動速度也是要關(guān)注的地方醒串,由于comfyui中的很多模型占用很大的存儲空間,如果啟動機器后一一下載可能花費數(shù)十分鐘鄙皇,這樣不但占用帶寬芜赌,而且等容器啟動正常工作,可能原節(jié)點組已經(jīng)積壓大量任務(wù)伴逸。


    啟動ing.png
  3. 任務(wù)分配問題缠沈,comfyui使用sd模型制作一張簡單的文生圖可能需要1-3s,但是如果制作圖片生成視頻错蝴,視頻生成視頻洲愤,受分辨率,視頻時長顷锰,幀率影響柬赐,可能要幾分鐘甚至數(shù)十分鐘,如果將耗時任務(wù)和非耗時任務(wù)統(tǒng)一在相同集群執(zhí)行可能造成非耗時用戶難以接受官紫。


    queueTime.png
  4. 工作流管理肛宋,不同的效果需要不同的工作流json。 隨著技術(shù)的改進束世,部分模型酝陈,工作流程也會發(fā)生變化,在多人開發(fā)環(huán)境下工作流管理會開始變的混亂毁涉。


    image.png
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末沉帮,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌遇西,老刑警劉巖馅精,帶你破解...
    沈念sama閱讀 206,126評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異粱檀,居然都是意外死亡洲敢,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評論 2 382
  • 文/潘曉璐 我一進店門茄蚯,熙熙樓的掌柜王于貴愁眉苦臉地迎上來压彭,“玉大人,你說我怎么就攤上這事渗常∽巢唬” “怎么了?”我有些...
    開封第一講書人閱讀 152,445評論 0 341
  • 文/不壞的土叔 我叫張陵皱碘,是天一觀的道長询一。 經(jīng)常有香客問我,道長癌椿,這世上最難降的妖魔是什么健蕊? 我笑而不...
    開封第一講書人閱讀 55,185評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮踢俄,結(jié)果婚禮上缩功,老公的妹妹穿的比我還像新娘。我一直安慰自己都办,他們只是感情好嫡锌,可當我...
    茶點故事閱讀 64,178評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著琳钉,像睡著了一般势木。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上歌懒,一...
    開封第一講書人閱讀 48,970評論 1 284
  • 那天跟压,我揣著相機與錄音,去河邊找鬼歼培。 笑死震蒋,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的躲庄。 我是一名探鬼主播查剖,決...
    沈念sama閱讀 38,276評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼噪窘!你這毒婦竟也來了笋庄?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 36,927評論 0 259
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎直砂,沒想到半個月后菌仁,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 43,400評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡静暂,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,883評論 2 323
  • 正文 我和宋清朗相戀三年济丘,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片洽蛀。...
    茶點故事閱讀 37,997評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡摹迷,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出郊供,到底是詐尸還是另有隱情峡碉,我是刑警寧澤,帶...
    沈念sama閱讀 33,646評論 4 322
  • 正文 年R本政府宣布驮审,位于F島的核電站鲫寄,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏疯淫。R本人自食惡果不足惜地来,卻給世界環(huán)境...
    茶點故事閱讀 39,213評論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望峡竣。 院中可真熱鬧靠抑,春花似錦量九、人聲如沸适掰。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽类浪。三九已至,卻和暖如春肌似,著一層夾襖步出監(jiān)牢的瞬間费就,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評論 1 260
  • 我被黑心中介騙來泰國打工川队, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留力细,地道東北人。 一個月前我還...
    沈念sama閱讀 45,423評論 2 352
  • 正文 我出身青樓固额,卻偏偏與公主長得像眠蚂,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子斗躏,可洞房花燭夜當晚...
    茶點故事閱讀 42,722評論 2 345

推薦閱讀更多精彩內(nèi)容