業(yè)務(wù)安全系統(tǒng)淺談(一)

趁著過年幾天菌瘫,在簡書上把之前做過的“業(yè)務(wù)安全系統(tǒng)”簡單梳理一下。

對(duì)于一個(gè)互聯(lián)網(wǎng)公司而言布卡,業(yè)務(wù)發(fā)展的不同階段橱鹏,對(duì)“業(yè)務(wù)安全”有著不同的目標(biāo)和需求。自己已經(jīng)在互聯(lián)網(wǎng)物流行業(yè)(車貨匹配)走過了近2年的時(shí)間义图,車貨匹配對(duì)“業(yè)務(wù)安全”的目標(biāo)和需求可以簡單概括為:

1. 從業(yè)務(wù)功能角度

-? 保障核心業(yè)務(wù)安全

“貨主發(fā)貨咽瓷、司機(jī)找貨”的場景中,貨主發(fā)布的貨源信息贸街,司機(jī)的期望是拉貨的需求真實(shí)的庵寞,信息的內(nèi)容是規(guī)范的(不含敏感詞等);而貨主的期望是承接運(yùn)單的司機(jī)是真實(shí)的薛匪,可靠的捐川,有真正拉貨需求的,從而保障交易

“反機(jī)器人爬貨逸尖、惡意騷擾”的場景中古沥,系統(tǒng)可以識(shí)別是機(jī)器人在對(duì)平臺(tái)進(jìn)行瀏覽貨源信息,并進(jìn)行屏蔽冷溶、蜜罐渐白;

“司機(jī)與貨主投訴”的場景中,提供接口讓用戶對(duì)貨源交易中的不公平逞频、不公正情況進(jìn)行投訴纯衍,并離線分析投訴的可靠性、真實(shí)性

- 保障運(yùn)營活動(dòng)安全

“車貨匹配的業(yè)務(wù)運(yùn)營活動(dòng)”場景中苗胀,有過“發(fā)多少次貨”送“多少”積分襟诸、撥打“某類”貨源送多少“積分”等瓦堵。因此,防止“薅羊毛”也是一個(gè)很重要的需求

2. 從系統(tǒng)架構(gòu)角度

- 業(yè)務(wù)安全系統(tǒng)需要是獨(dú)立的歌亲,可降級(jí)的(在線的生產(chǎn)系統(tǒng)部分)菇用。核心車貨匹配系統(tǒng)(優(yōu)化排序服務(wù)、搜索服務(wù)陷揪、貨源服務(wù)等)與業(yè)務(wù)安全系統(tǒng)有著接口調(diào)用的耦合度惋鸥,因此為了保障核心系統(tǒng)可靠,業(yè)務(wù)安全系統(tǒng)需要集成到統(tǒng)一的RPC管理框架及應(yīng)用配置管理系統(tǒng)中悍缠,以實(shí)現(xiàn)統(tǒng)一的熔斷卦绣、限流及業(yè)務(wù)/系統(tǒng)開關(guān)控制

- 業(yè)務(wù)安全系統(tǒng)需要有匯聚“業(yè)務(wù)安全”相關(guān)的各類大數(shù)據(jù),圍繞大數(shù)據(jù)存儲(chǔ)系統(tǒng)飞蚓,之上構(gòu)建一套集抽取滤港、轉(zhuǎn)換,分析的系統(tǒng)及報(bào)表系統(tǒng)(離線的系統(tǒng))趴拧,可以讓數(shù)據(jù)分析師溅漾、產(chǎn)品經(jīng)理追溯數(shù)據(jù)(下鉆、上卷等)著榴。并可以離線地訓(xùn)練各類機(jī)器學(xué)習(xí)模型(增加添履、修改模型),對(duì)每個(gè)用戶的行為數(shù)據(jù)進(jìn)行事后離線甄別和事中的實(shí)時(shí)甄別

????- “實(shí)時(shí)的甄別用戶行為” 需要一套規(guī)則引擎兄渺,以達(dá)到產(chǎn)品經(jīng)理可以隨時(shí)根據(jù)離線學(xué)習(xí)的模型及業(yè)務(wù)規(guī)則進(jìn)行線上規(guī)則改進(jìn)缝龄,并且系統(tǒng)服務(wù)不重啟

- 其他的諸如與用戶中心系統(tǒng)對(duì)接、統(tǒng)一配置中心系統(tǒng)對(duì)接挂谍,就不贅述了。

再來說說業(yè)務(wù)安全系統(tǒng)的架構(gòu)吧

先上張架構(gòu)圖


系統(tǒng)架構(gòu)

根據(jù)系統(tǒng)的調(diào)用場景瞎饲,將系統(tǒng)服務(wù)分為“在線”的供核心系統(tǒng)實(shí)時(shí)調(diào)用的系統(tǒng)及“離線”的用戶行為分析系統(tǒng)服務(wù)(其中口叙,大數(shù)據(jù)實(shí)時(shí)計(jì)算平臺(tái)和業(yè)務(wù)安全規(guī)則引擎服務(wù)完成事中的規(guī)則判定)

1. 在線部分

- 業(yè)務(wù)安全業(yè)務(wù)接口層,提供在用戶發(fā)貨嗅战、找貨時(shí)判定用戶是否屬于某類嫌疑用戶或者應(yīng)該禁用的行為

- 業(yè)務(wù)安全懲罰中心服務(wù)妄田,維護(hù)各類被懲罰、投訴的用戶信息及懲罰配置

2. 離線部分

- 實(shí)時(shí)計(jì)算平臺(tái)+業(yè)務(wù)安全指標(biāo)轉(zhuǎn)換與增強(qiáng)服務(wù)+業(yè)務(wù)安全規(guī)則匹配引擎驮捍,構(gòu)成了離線的對(duì)用戶行為指標(biāo)實(shí)時(shí)統(tǒng)計(jì)及規(guī)則匹配的過程疟呐,離線(近實(shí)時(shí)的)對(duì)用戶行為進(jìn)行監(jiān)測(cè)、懲罰

- 業(yè)務(wù)安全大數(shù)據(jù)分析平臺(tái)东且,提供事后的用戶行為數(shù)據(jù)分析启具,可以拓展各類模型,對(duì)用戶行為進(jìn)行學(xué)習(xí)分類珊泳。同時(shí)鲁冯,對(duì)數(shù)據(jù)進(jìn)行轉(zhuǎn)換拷沸、聚合(構(gòu)建用戶行為數(shù)據(jù)維度的大寬表),供BI系統(tǒng)和指標(biāo)監(jiān)控系統(tǒng)分析讀取薯演。

~分割線~



今天先開個(gè)頭撞芍,其實(shí)隨著業(yè)務(wù)不斷快速發(fā)展,業(yè)務(wù)安全系統(tǒng)也需要在信息校驗(yàn)跨扮、用戶貨源真實(shí)性鑒別序无、惡意行為識(shí)別等方面繼續(xù)豐富和完善。后續(xù)有空繼續(xù)對(duì)系統(tǒng)中的各個(gè)技術(shù)點(diǎn)進(jìn)行總結(jié)衡创。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末帝嗡,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子钧汹,更是在濱河造成了極大的恐慌丈探,老刑警劉巖,帶你破解...
    沈念sama閱讀 211,743評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件拔莱,死亡現(xiàn)場離奇詭異碗降,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)塘秦,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,296評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門讼渊,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人尊剔,你說我怎么就攤上這事爪幻。” “怎么了须误?”我有些...
    開封第一講書人閱讀 157,285評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵挨稿,是天一觀的道長。 經(jīng)常有香客問我京痢,道長奶甘,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 56,485評(píng)論 1 283
  • 正文 為了忘掉前任祭椰,我火速辦了婚禮臭家,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘方淤。我一直安慰自己钉赁,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,581評(píng)論 6 386
  • 文/花漫 我一把揭開白布携茂。 她就那樣靜靜地躺著你踩,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上姓蜂,一...
    開封第一講書人閱讀 49,821評(píng)論 1 290
  • 那天按厘,我揣著相機(jī)與錄音,去河邊找鬼钱慢。 笑死逮京,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的束莫。 我是一名探鬼主播懒棉,決...
    沈念sama閱讀 38,960評(píng)論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢(mèng)啊……” “哼览绿!你這毒婦竟也來了策严?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 37,719評(píng)論 0 266
  • 序言:老撾萬榮一對(duì)情侶失蹤饿敲,失蹤者是張志新(化名)和其女友劉穎妻导,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體怀各,經(jīng)...
    沈念sama閱讀 44,186評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡倔韭,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,516評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了瓢对。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片寿酌。...
    茶點(diǎn)故事閱讀 38,650評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖硕蛹,靈堂內(nèi)的尸體忽然破棺而出醇疼,到底是詐尸還是另有隱情,我是刑警寧澤法焰,帶...
    沈念sama閱讀 34,329評(píng)論 4 330
  • 正文 年R本政府宣布秧荆,位于F島的核電站,受9級(jí)特大地震影響埃仪,放射性物質(zhì)發(fā)生泄漏辰如。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,936評(píng)論 3 313
  • 文/蒙蒙 一贵试、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧凯正,春花似錦毙玻、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,757評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至允睹,卻和暖如春运准,著一層夾襖步出監(jiān)牢的瞬間幌氮,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,991評(píng)論 1 266
  • 我被黑心中介騙來泰國打工胁澳, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留该互,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,370評(píng)論 2 360
  • 正文 我出身青樓韭畸,卻偏偏與公主長得像宇智,于是被迫代替她去往敵國和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子胰丁,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,527評(píng)論 2 349

推薦閱讀更多精彩內(nèi)容