什么場景(不)適合使用Lambda

Lambda是AWS推出的基于Function-as-a-Service(FaaS)的Serverless服務卿捎。我結合項目使用體驗,發(fā)現(xiàn)Lambda不適合或者說不能獨立支撐以下場景:

  • 用戶期望穩(wěn)定的低延遲
  • 請求需要在多個函數間跳轉
  • 可預期的大量調用

與此同時,Lambda和其它AWS服務結合起來能為以下場景提供良好的解決方案:

  • 作為監(jiān)聽器異步響應Webhook (API Gateway + SQS + Lambda)
  • 處理需要延時執(zhí)行或指定時間執(zhí)行的任務 (Step Functions + SQS + Lambda)

Lambda僅支持單請求模式雹拄,可以考慮使用AWS的App Runner或者GCP的Cloud Run替代惩琉。

背景介紹

筆者參與的項目大量使用Lambda進行開發(fā),Lambda所承擔的角色包括:作為AppServer支撐前端功能、監(jiān)聽第三方系統(tǒng)的Webhook囊颅,作為后臺程序執(zhí)行批處理任務炉峰,等等畏妖。在使用過程中,筆者感覺Lambda并非萬能良方疼阔,有其設計和功能上的限制戒劫,所以根據項目的使用情況和體驗,梳理了Lambda適合和不適合的場景竿开,分享給大家谱仪,供大家在技術選型時進行參考。

Lambda有什么限制

  • 單請求模式:一個實例一次只能處理一個請求否彩,如果在處理完成前又有新的請求需要處理疯攒,Lambda需要創(chuàng)建一個新的實例來處理。
  • 體積:一個函數解壓后體積不能超過250MB列荔,硬性限制敬尺;在使用Lambda時務必注意控制依賴枚尼,避免無用的依賴增大體積,并將靜態(tài)文件等從代碼庫中抽離砂吞。特別值得注意的是Lambda運行時自帶了aws-sdk署恍,除非需要指定SDK的版本,否則請勿將SDK打入部署包中蜻直。
  • 并發(fā)數量:默認的一個帳戶的區(qū)域并發(fā)限制是1000盯质,也就是說可以同時處理1000個請求;可向AWS提出申請擴展到上萬概而。如果到達上限呼巷,新的請求會被節(jié)流。在大型項目中不同模塊請務必使用不同的帳號赎瑰,以隔離對并發(fā)的需求王悍,避免單模塊workload的波動影響到整個系統(tǒng)的穩(wěn)定性。可以通過Reserved Concurrency來限制單個函數并發(fā)數量餐曼,但同時會削減未設置Reserved Concurrency函數的并發(fā)上限压储。
  • 超時時間:最大900秒的超時時間,不可更改源譬;如果在Happy Path時也不能判斷執(zhí)行時間少于900秒集惋,則需要拆分Lambda或者使用其它方案。
  • 工具:Lambda有特定的部署方式瓶佳,需要工具來支持芋膘,才能保證完整的開發(fā)流程;可使用的工具包括CDK霸饲、SAM为朋、Serverless等。

Lambda的特點

生命周期

Lambda作為一種Serverless的計算服務厚脉,一個很重要的特點就是按需創(chuàng)建實例习寸,即在請求到來時創(chuàng)建實例來處理(冷啟動)。當實例處理完成請求后傻工,會保留一段時間霞溪,可以響應后續(xù)請求(熱啟動)。如果實例空閑超過一段時間中捆,就會被Lambda回收(AWS未明確提及回收的等待時間)鸯匹。AWS官方沒有給出狀態(tài)的標準名稱,我們這里用非標準的術語來描述生命周期泄伪,如下圖

1-lambda.jpg

同步 vs 異步

Lambda的函數有同步和異步兩種執(zhí)行模式殴蓬。在同步模式下,當我們執(zhí)行函數時蟋滴,Lambda會創(chuàng)建/復用實例染厅,并等待實例執(zhí)行完成后再返回結果痘绎;在異步模式下,Lambda會將請求加入隊列并立即返回肖粮,然后在后臺創(chuàng)建/復用實例進行處理孤页。使用異步模式時可以設置重試次數,并且如果重試后仍然不能成功涩馆,可以通過設置將失敗的請求發(fā)送到另外的地方行施,比如SNS的Topic。

很多AWS服務都能與Lambda進行集成凌净,需要查文檔來明確調用Lambda的方式悲龟,比如API Gateway是以同步模式調用Lambda,CloudWatch Event是以異步模式調用Lambda冰寻。

Lambda不適合的場景

用戶期望穩(wěn)定的低延遲

基于Lambda的生命周期,當有請求需要處理時皿渗,如果此時無可用實例斩芭,Lambda會初始化一個新實例并使用,也就是冷啟動乐疆。結合Lambda單請求模式的特點划乖,意味著一定會出現(xiàn)相當數量的冷啟動,請求的響應時間會摻雜著實例初始化時間挤土,出現(xiàn)延遲的波動琴庵。以項目經驗來看,一個不復雜的NodeJS實現(xiàn)的函數仰美,啟動時間大概在1-3秒區(qū)間內波動迷殿;這個區(qū)間數值來自于CloudWatch的日志輸出,實際體感時間可能更長咖杂,這部分時間會直接暴露給調用方庆寺。所以當一個場景需要提供持續(xù)穩(wěn)定的低延遲響應時,以同步方式調用Lambda并不合適诉字。

順帶一提懦尝,實例的啟動時間是很重要的,如有些傳統(tǒng)Java應用啟動就需要幾分鐘的壤圃,建議不要直接放上Lambda陵霉。

請求需要在多個實例間跳轉

如果一個請求需要以同步的形式在多個實例中跳轉,在最壞情況下伍绳,會成倍放大請求的延遲踊挠,并且成倍消耗并發(fā)數量。以項目經驗為例墨叛,有一個API Gateway -> Function A -> Function B -> 第三方系統(tǒng)的訪問鏈路止毕,在測試環(huán)境(用的人少模蜡,流量波動大)中,從頁面調用這個接口的時間基本上在8秒以上扁凛,有時會超過10秒忍疾,讓客戶懷疑系統(tǒng)的性能有問題。

以網狀結構設計的微服務模式應用谨朝,服務之間需要頻繁同步通信卤妒,放上Lambda需慎重。

可預期的大量調用

如果一個接口有大量的調用字币,那么基于Efficiency和Cost的考慮则披,Lambda未必是合適的選擇。

從一般性原則來講洗出,如果一個接口存在大量調用士复,那么為每次調用分配一個獨占的實例顯然不是一種明智的選擇,這樣會顯著放大單個實例的邊際開銷翩活。這種情況下阱洪,增加單個實例同時能處理的調用數量,能夠有效提高系統(tǒng)吞吐量菠镇,提升系統(tǒng)的整體效率冗荸。

從價格方面來考慮,Lambda使用的是基于調用次數計費的模型利耍,當調用次數增長到一定的閾值以上蚌本,其成本有效性必定會低于基于使用資源時長計費的模型。讓我們用一個虛擬的場景來對比Lambda和App Runner:假設有一個接口隘梨,每天有3個小時的繁忙時段處理600 RPS的調用刀诬,另有12個小時非繁忙時段處理60 RPS的調用澈蚌,其余時間沒有調用笔链;每次調用持續(xù)時間500ms纱注。兩種服務的價格對比如下:

  • Lambda: 基于128M內存的配置,每天有600x60x60x3 + 60x60x60x12 = 9072000次調用税稼,那么每月費用為$335.76烦秩。感興趣的讀者可以使用AWS Pricing Calculator自行計算。

  • App Runner: 基于1 vCPU和2G內存的配置郎仆,假設每個實例可以同時處理60個請求只祠,當超出60個請求后會創(chuàng)建新實例來處理。那么每天繁忙時段的花費是2.30扰肌,非繁忙時段的花費是0.77抛寝,沒有調用時段的費用是0.34,每月總費用是102。對費用詳情感興趣的讀者請移步Example3: High volume production app盗舰。

Lambda適合的場景

作為監(jiān)聽器異步響應Webhook

很多第三方系統(tǒng)提供Webhook來進行通知晶府,并且一般Webhook的設計都是異步模式。這種場景可通過API Gateway钻趋,SQS和Lambda提供解決方案川陆。

2-lambda.jpg

讓我們按照AWS的5 Pillars來分析為什么這是一個良好的解決方案:

  • Reliability: API Gateway加上SQS能夠保證足夠的高可用性,并且提供穩(wěn)定的低延遲蛮位,這對Webhook的監(jiān)聽器來說相當重要较沪,在Webhook設計里,如果監(jiān)聽器不能在短時間內提供響應失仁,可能會被認為是不健康的尸曼,導致對監(jiān)聽器進行限流或屏蔽。
  • Performance Efficiency: 上述服務提供了足夠的可擴展性萄焦,保證監(jiān)聽器能夠應對較大流量的變化控轿,一般情況下無需提前預測流量來準備基礎設施。
  • Cost Optimization: 上述服務都是Serverless的服務楷扬,能夠做到按實際使用付費解幽,而無需為基礎設施付費。
  • Security: API Gateway和SQS自動提供了HTTPS協(xié)議烘苹,保證數據傳輸安全;SQS和Lambda可通過IAM確保訪問控制片部,API Gateway可通過Authorizer或API Key來進行訪問控制镣衡。
  • Operational Excellence: 上述設計可完全通過Infrastructure as Code進行部署,無需手動操作档悠。

處理需要延時執(zhí)行或指定時間執(zhí)行的任務

有時候一個任務需要等待一段時間之后才執(zhí)行廊鸥,或者到了一個特定的時間才執(zhí)行,相比用一個Long-run的服務去定時掃描處理辖所,Step Functions惰说、SQS加上Lambda提供了一種更高效的解決方案。

3-lambda.png

前述的優(yōu)點不再重復提及缘回,這里補充一些對Step Functions的說明吆视。Step Functions是AWS提供的Serverless的狀態(tài)機服務,其中包含了等待的狀態(tài)酥宴,最長可等待1年的時間啦吧;AWS保證了等待的可靠性。Step Functions結合Lambda拙寡,可以針對單個任務去設置處理時間授滓,不再需要批量掃描處理任務。Step Functions按照狀態(tài)變化收費,等待時狀態(tài)并沒有發(fā)生變化般堆,無需付費在孝,可有效降低費用開銷。

寫在最后

Serverless的特性決定了實例無法避免冷啟動淮摔。Lambda支持同步和異步兩種調用模式私沮,以項目經驗來看,同步調用模式受冷啟動影響更大噩咪,有時會通過SQS將調用封裝成異步模式顾彰。在Serverless工具中甚至提供了Serverless WarmUp Plugin插件,通過定時調用避免冷啟動胃碾。AWS也提供了Provisioned Concurrency特性來維持熱實例涨享,減少冷啟動的次數。

Lambda的單請求模式是一個很大的限制仆百,既限制了實例的性能(比如使用NIO)厕隧,又導致實例需要更頻繁初始化。如果能夠改變單請求模式俄周,讓一個實例接受更多的請求吁讨,將會是一個很好的特性。
Lambda有一套獨立的生態(tài)系統(tǒng)峦朗,對代碼和部署都有特定的要求建丧,降低了代碼可移植性。

有沒有更好的選擇呢波势?筆者推薦讀者參考下GCP的Cloud Run服務翎朱,提供了Container-as-a-Service(CaaS)解決方案,能夠將鏡像以Serverless形式部署上去尺铣,通過指定實例的請求并發(fā)度拴曲,能顯著減少初始化新實例的次數。AWS也提供了類似的服務App Runner凛忿,不過目前只在美國澈灼、愛爾蘭和日本區(qū)域提供。


文/Thoughtworks楊航
原文鏈接: https://insights.thoughtworks.cn/lambda
更多精彩洞見店溢,請關注微信公眾號Thoughtworks洞見叁熔。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市逞怨,隨后出現(xiàn)的幾起案子者疤,更是在濱河造成了極大的恐慌,老刑警劉巖叠赦,帶你破解...
    沈念sama閱讀 206,968評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件驹马,死亡現(xiàn)場離奇詭異革砸,居然都是意外死亡,警方通過查閱死者的電腦和手機糯累,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評論 2 382
  • 文/潘曉璐 我一進店門算利,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人泳姐,你說我怎么就攤上這事效拭。” “怎么了胖秒?”我有些...
    開封第一講書人閱讀 153,220評論 0 344
  • 文/不壞的土叔 我叫張陵缎患,是天一觀的道長。 經常有香客問我阎肝,道長挤渔,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 55,416評論 1 279
  • 正文 為了忘掉前任风题,我火速辦了婚禮判导,結果婚禮上,老公的妹妹穿的比我還像新娘沛硅。我一直安慰自己眼刃,他們只是感情好,可當我...
    茶點故事閱讀 64,425評論 5 374
  • 文/花漫 我一把揭開白布摇肌。 她就那樣靜靜地躺著擂红,像睡著了一般。 火紅的嫁衣襯著肌膚如雪围小。 梳的紋絲不亂的頭發(fā)上篮条,一...
    開封第一講書人閱讀 49,144評論 1 285
  • 那天,我揣著相機與錄音吩抓,去河邊找鬼。 笑死赴恨,一個胖子當著我的面吹牛疹娶,可吹牛的內容都是我干的。 我是一名探鬼主播伦连,決...
    沈念sama閱讀 38,432評論 3 401
  • 文/蒼蘭香墨 我猛地睜開眼雨饺,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了惑淳?” 一聲冷哼從身側響起额港,我...
    開封第一講書人閱讀 37,088評論 0 261
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎歧焦,沒想到半個月后移斩,有當地人在樹林里發(fā)現(xiàn)了一具尸體,經...
    沈念sama閱讀 43,586評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 36,028評論 2 325
  • 正文 我和宋清朗相戀三年向瓷,在試婚紗的時候發(fā)現(xiàn)自己被綠了肠套。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,137評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡猖任,死狀恐怖你稚,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情朱躺,我是刑警寧澤刁赖,帶...
    沈念sama閱讀 33,783評論 4 324
  • 正文 年R本政府宣布,位于F島的核電站长搀,受9級特大地震影響宇弛,放射性物質發(fā)生泄漏。R本人自食惡果不足惜盈滴,卻給世界環(huán)境...
    茶點故事閱讀 39,343評論 3 307
  • 文/蒙蒙 一涯肩、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧巢钓,春花似錦病苗、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,333評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至背镇,卻和暖如春咬展,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背瞒斩。 一陣腳步聲響...
    開封第一講書人閱讀 31,559評論 1 262
  • 我被黑心中介騙來泰國打工破婆, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人胸囱。 一個月前我還...
    沈念sama閱讀 45,595評論 2 355
  • 正文 我出身青樓祷舀,卻偏偏與公主長得像,于是被迫代替她去往敵國和親烹笔。 傳聞我的和親對象是個殘疾皇子裳扯,可洞房花燭夜當晚...
    茶點故事閱讀 42,901評論 2 345

推薦閱讀更多精彩內容