流量錄制回放相關(guān)介紹

流量錄制回放是什么桥帆?

流量錄制:在不影響用戶正常使用的前提下,獲取線上用戶的真實(shí)請求和服務(wù)響應(yīng)結(jié)果,將其保存或者轉(zhuǎn)發(fā)到目標(biāo)應(yīng)用。

采用不同的流量錄制手段伞剑,可以采集不同傳輸階段的流量黎泣。


流量復(fù)制方式:

基于應(yīng)用層的復(fù)制

優(yōu)點(diǎn):實(shí)現(xiàn)簡單

????? 可以實(shí)現(xiàn)應(yīng)用內(nèi)部方法級(jí)的流量錄制缤谎;

缺點(diǎn):拓展性差抒倚,一般支持某種協(xié)議;

????? 復(fù)制從應(yīng)用層開始,穿過整個(gè)協(xié)議棧,通常要占用底層的資源汁展;

???? ?與應(yīng)用耦合一起,容易對(duì)應(yīng)用造成影響,比如超時(shí)催植;

????? 會(huì)出現(xiàn)丟包的情況笔刹;

基于數(shù)據(jù)包的復(fù)制

缺點(diǎn):復(fù)雜芥备,難度大

優(yōu)點(diǎn):不需要穿過整個(gè)協(xié)議棧,對(duì)資源的占用相對(duì)較低舌菜;

????? 理論上支持此協(xié)議上的所有應(yīng)用層協(xié)議錄制萌壳;

流量回放方式:

? ?在線方式:將復(fù)制的流量實(shí)時(shí)地轉(zhuǎn)發(fā)到目標(biāo)服務(wù)上

? ?離線方式:將復(fù)制的流量先保存到數(shù)據(jù)庫或文件中,再將處理或篩選后的流量回放到目標(biāo)服務(wù)

為什么當(dāng)下被廣泛應(yīng)用日月?

流量復(fù)雜袱瓮,請求構(gòu)造成本比較高;

業(yè)務(wù)復(fù)雜爱咬,業(yè)務(wù)場景梳理困難尺借,流量配比不真實(shí);

服務(wù)復(fù)雜精拟,服務(wù)調(diào)用關(guān)系復(fù)雜燎斩,服務(wù)模塊多虱歪,構(gòu)成成本高;

應(yīng)用場景有哪些栅表?

壓力測試

各大公司進(jìn)行模塊級(jí)壓測或者全鏈路壓測基本都是采用流量錄制的方式笋鄙,先對(duì)錄制的流量進(jìn)行存儲(chǔ),然后對(duì)流量進(jìn)行編輯怪瓶、過濾后通過壓測引擎向被測服務(wù)發(fā)壓

回歸測試

傳統(tǒng)的接口測試方案萧落,通過部署環(huán)境、構(gòu)造請求劳殖、發(fā)送請求铐尚、結(jié)果斷言的方式相對(duì)目前復(fù)雜業(yè)務(wù)場景來說太單一了,一是構(gòu)造的請求過于簡單哆姻,大多是標(biāo)準(zhǔn)的正常的請求宣增,二是環(huán)境依賴太多,封閉環(huán)境部署困難矛缨。所以越來越多的公司項(xiàng)目采用流量回放的方式進(jìn)行穩(wěn)定性測試和功能回歸測試爹脾,結(jié)果評(píng)定主要依賴指標(biāo)統(tǒng)計(jì)維度和response維度的diff。

問題調(diào)試

面對(duì)當(dāng)前節(jié)點(diǎn)眾多箕昭、交互繁雜的微服務(wù)架構(gòu)模式灵妨,問題定位太難了。

數(shù)據(jù)構(gòu)造

錄制的數(shù)據(jù)進(jìn)行數(shù)據(jù)特征分析落竹,聚類場景數(shù)據(jù)泌霍,用于接口測試,當(dāng)然這個(gè)通常指應(yīng)用層錄制的數(shù)據(jù)述召。

數(shù)據(jù)mock

用場景數(shù)據(jù)進(jìn)行接口或方法級(jí)的mock

Badcase挖掘

總之復(fù)雜業(yè)務(wù)場景下朱转,數(shù)據(jù)是分析業(yè)務(wù)場景、構(gòu)建測試環(huán)境积暖、構(gòu)造測試數(shù)據(jù)藤为、保證服務(wù)質(zhì)量的寶貴資源。

有什么局限性夺刑?

使用局限性

新服務(wù)沒有線上流量缅疟,無法進(jìn)行復(fù)制;

對(duì)于復(fù)制的流量遍愿,可能需要進(jìn)行篩選存淫,重新流量配比后才能模擬某個(gè)場景使用;

錄制流量進(jìn)行回放時(shí)错览,和初始真實(shí)場景有變動(dòng)纫雁;

安全性

流量錄制功能對(duì)架構(gòu)和設(shè)計(jì)要求較高,否則容易影響線上性能倾哺;

流量回放需要設(shè)置相關(guān)的標(biāo)識(shí)轧邪,進(jìn)行相關(guān)的短路刽脖、影子苦表處理方式影響線上功能;

注意事項(xiàng)有哪些忌愚?

線上服務(wù)安全保障:流量復(fù)制以不影響線上功能為前提曲管,包括對(duì)線上數(shù)據(jù)、日志的污染硕糊;

錄制流量染色:對(duì)錄制流量進(jìn)行標(biāo)識(shí)院水,以實(shí)現(xiàn)對(duì)錄制流量的特殊處理,包括寫隔離简十、寫短路等檬某;

并發(fā)控制:錄制流量服務(wù)多少要占用服務(wù)資源,尤其應(yīng)用層實(shí)現(xiàn)的錄制回放功能螟蝙,需要進(jìn)行充分的測試評(píng)估才能投入使用恢恼,并根據(jù)實(shí)際情況控制并發(fā);

錄制回放開源項(xiàng)目

如果評(píng)價(jià)錄制回放工具的優(yōu)劣:

部署的復(fù)雜性

使用限制及存在缺陷

比如胰默,必須部署在一個(gè)網(wǎng)段

功能拓展

多點(diǎn)錄制

流量伸縮

實(shí)時(shí)在線模式

性能

占用資源

是否支持高并發(fā)


?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末场斑,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子牵署,更是在濱河造成了極大的恐慌漏隐,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,386評(píng)論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件奴迅,死亡現(xiàn)場離奇詭異青责,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)取具,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,142評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門爽柒,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人者填,你說我怎么就攤上這事∽隹” “怎么了占哟?”我有些...
    開封第一講書人閱讀 164,704評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵,是天一觀的道長酿矢。 經(jīng)常有香客問我榨乎,道長,這世上最難降的妖魔是什么瘫筐? 我笑而不...
    開封第一講書人閱讀 58,702評(píng)論 1 294
  • 正文 為了忘掉前任蜜暑,我火速辦了婚禮,結(jié)果婚禮上策肝,老公的妹妹穿的比我還像新娘肛捍。我一直安慰自己隐绵,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,716評(píng)論 6 392
  • 文/花漫 我一把揭開白布拙毫。 她就那樣靜靜地躺著依许,像睡著了一般。 火紅的嫁衣襯著肌膚如雪缀蹄。 梳的紋絲不亂的頭發(fā)上峭跳,一...
    開封第一講書人閱讀 51,573評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音缺前,去河邊找鬼蛀醉。 笑死,一個(gè)胖子當(dāng)著我的面吹牛衅码,可吹牛的內(nèi)容都是我干的拯刁。 我是一名探鬼主播,決...
    沈念sama閱讀 40,314評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼肆良,長吁一口氣:“原來是場噩夢啊……” “哼筛璧!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起惹恃,我...
    開封第一講書人閱讀 39,230評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤夭谤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后巫糙,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體朗儒,經(jīng)...
    沈念sama閱讀 45,680評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,873評(píng)論 3 336
  • 正文 我和宋清朗相戀三年参淹,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了醉锄。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,991評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡浙值,死狀恐怖恳不,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情开呐,我是刑警寧澤烟勋,帶...
    沈念sama閱讀 35,706評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站筐付,受9級(jí)特大地震影響卵惦,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜瓦戚,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,329評(píng)論 3 330
  • 文/蒙蒙 一沮尿、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧较解,春花似錦畜疾、人聲如沸赴邻。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,910評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽乍楚。三九已至,卻和暖如春届慈,著一層夾襖步出監(jiān)牢的瞬間徒溪,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,038評(píng)論 1 270
  • 我被黑心中介騙來泰國打工金顿, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留臊泌,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 48,158評(píng)論 3 370
  • 正文 我出身青樓揍拆,卻偏偏與公主長得像渠概,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子嫂拴,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,941評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容