關(guān)于做好“個(gè)性化推薦”的一些感悟

Hi,忙碌了許久肠套,終于有片刻的閑暇時(shí)光。想想了最近做的一些項(xiàng)目,其中涉及的部分功能設(shè)計(jì)覺得需要重新梳理一下思路,找出其中的不足曙痘,也分享給大家,請(qǐng)大家不吝賜教~

由于人工智能(AI)風(fēng)的興起与斤,大家在日常生活中也慢慢的受AI技術(shù)的影響网持,像我們使用較頻繁的產(chǎn)品如“喜馬拉雅”、“今日頭條”竣稽、“微博”等囱怕,這些產(chǎn)品都會(huì)根據(jù)我們每日瀏覽的內(nèi)容推送給相關(guān)的內(nèi)容給我們?yōu)g覽閱讀,比較普遍的叫法就是“千人千面”毫别。

本文我想講一下在客服領(lǐng)域中的“千人千面”娃弓,略懂皮毛~

業(yè)務(wù)訴求是:在企業(yè)中有一個(gè)智能問答的機(jī)器人,收集內(nèi)部咨詢比較頻繁的業(yè)務(wù)知識(shí)岛宦,解決每位員工日常的咨詢台丛、答疑工作,從而減輕人工客服日復(fù)一日砾肺,重復(fù)的咨詢工作挽霉。

需求是:將用戶遇到問題被動(dòng)的去咨詢改變成根據(jù)用戶歷史咨詢的內(nèi)容,機(jī)器人自動(dòng)推動(dòng)與其相關(guān)的內(nèi)容变汪,讓用戶由被動(dòng)轉(zhuǎn)變成主動(dòng)獲取新的知識(shí)侠坎,更有利于用戶快速解決問題。

涉及的算法:在實(shí)現(xiàn)“千人千面”的過程裙盾,主要用到了“itemcf 基于物品的協(xié)同過濾算法”和“usercf 基于用戶協(xié)同推薦算法”

itemcf指的是給用戶推薦和他之前喜歡的物品相似的物品

usercf指的是瀏覽量該物品的用戶還瀏覽了哪些物品

抽取用戶標(biāo)簽

首先需要獲取用戶與機(jī)器人最近一段時(shí)間內(nèi)(可自定義)的會(huì)話記錄实胸,系統(tǒng)通過文本分析獲取每位用戶的標(biāo)簽信息他嫡。標(biāo)簽包含用戶所屬的部門、職級(jí)庐完、咨詢頻率較高的知識(shí)分類等

在抽取標(biāo)簽的過程中 需要了解客戶的業(yè)務(wù)钢属,將沒有用的信息降低權(quán)重,過濾掉不需要的標(biāo)簽詞门躯。比如“集團(tuán)職能”僅是每個(gè)職位前面的修飾語淆党,沒有作為標(biāo)簽的價(jià)值

標(biāo)簽抽取完成后,由于是系統(tǒng)自動(dòng)抽取存在抽取的標(biāo)簽不合理的情況生音,需要將此信息展示出來宁否,能支持人工干預(yù),提高標(biāo)簽的準(zhǔn)確性缀遍。另外抽取出的標(biāo)簽有可能表達(dá)同樣的意思但是標(biāo)簽名稱不一樣慕匠,這時(shí)候還需要利用“聚類”算法,對(duì)標(biāo)簽內(nèi)容進(jìn)行文本相似度計(jì)算域醇,對(duì)于意思相近的標(biāo)簽進(jìn)行合并

聚類可視化結(jié)果案例:同一類標(biāo)簽詞位置相近且顏色相同台谊。

根據(jù)用戶歷史訪問記錄,機(jī)器人自動(dòng)推送相關(guān)熱點(diǎn)問題供用戶訪問

用戶標(biāo)簽抽取完成后譬挚,即可用于用戶推薦了

在做推薦的過程中需要注意:

系統(tǒng)性能問題锅铅,因?yàn)閿?shù)據(jù)分析需要消耗服務(wù)器性能,所以決定每天凌晨定時(shí)去分析數(shù)據(jù)减宣,生成新的標(biāo)簽入數(shù)據(jù)庫(kù)盐须。這里也許你會(huì)發(fā)現(xiàn)一個(gè)問題,對(duì)漆腌,就是推薦數(shù)據(jù)不是實(shí)時(shí)的贼邓,每天更新一次,用戶在當(dāng)天內(nèi)看到的推薦數(shù)據(jù)都是一樣的闷尿。

冷啟動(dòng)問題塑径,對(duì)于初次訪問的用戶來說,他沒有會(huì)話記錄填具,按照上面的邏輯無法完成推薦统舀。所以我們想了其他的辦法,找到與當(dāng)前用戶同部門劳景、同職級(jí)的用戶誉简,將這些用戶咨詢的問題中瀏覽量topN的推送給當(dāng)前的用戶查看

驗(yàn)證推薦準(zhǔn)確性

推薦功能做完后,需要驗(yàn)證推薦的效果是否對(duì)用戶產(chǎn)生價(jià)值盟广。

先模擬10位新用戶闷串,其中5位用戶有針對(duì)性的對(duì)問題進(jìn)行咨詢,另外5位用戶則隨意咨詢衡蚂,每位用戶咨詢的問題數(shù)量不能少于10條窿克,有利于標(biāo)簽的抽取

再模擬10位新用戶,這些新用戶與上面用戶在相同的部門毛甲、相同的職級(jí)年叮,查看這些新用戶是否推送上面用戶咨詢過的問題。如果推送則說明推薦成功玻募,否則推薦失敗

結(jié)論

在設(shè)計(jì)這個(gè)功能的過程中只损,遇到了很多坑,標(biāo)簽抽取不準(zhǔn)七咧、推薦效果不理想跃惫、不知道該如何驗(yàn)證推薦準(zhǔn)確性等,多次向NLP艾栋、研發(fā)同事請(qǐng)教爆存,經(jīng)過多番溝通,最終完成了這個(gè)推薦功能蝗砾。自己從中學(xué)習(xí)到了不少知識(shí)點(diǎn)先较,最后產(chǎn)品上線也得到了業(yè)務(wù)部門的認(rèn)可,很是感謝小伙伴的支持~

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末悼粮,一起剝皮案震驚了整個(gè)濱河市闲勺,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌扣猫,老刑警劉巖菜循,帶你破解...
    沈念sama閱讀 217,734評(píng)論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異申尤,居然都是意外死亡癌幕,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門瀑凝,熙熙樓的掌柜王于貴愁眉苦臉地迎上來序芦,“玉大人,你說我怎么就攤上這事粤咪⊙柚校” “怎么了?”我有些...
    開封第一講書人閱讀 164,133評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵寥枝,是天一觀的道長(zhǎng)宪塔。 經(jīng)常有香客問我,道長(zhǎng)囊拜,這世上最難降的妖魔是什么某筐? 我笑而不...
    開封第一講書人閱讀 58,532評(píng)論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮冠跷,結(jié)果婚禮上南誊,老公的妹妹穿的比我還像新娘身诺。我一直安慰自己,他們只是感情好抄囚,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,585評(píng)論 6 392
  • 文/花漫 我一把揭開白布霉赡。 她就那樣靜靜地躺著,像睡著了一般幔托。 火紅的嫁衣襯著肌膚如雪穴亏。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,462評(píng)論 1 302
  • 那天重挑,我揣著相機(jī)與錄音嗓化,去河邊找鬼。 笑死谬哀,一個(gè)胖子當(dāng)著我的面吹牛刺覆,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播玻粪,決...
    沈念sama閱讀 40,262評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼隅津,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了劲室?” 一聲冷哼從身側(cè)響起伦仍,我...
    開封第一講書人閱讀 39,153評(píng)論 0 276
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎很洋,沒想到半個(gè)月后充蓝,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,587評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡喉磁,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,792評(píng)論 3 336
  • 正文 我和宋清朗相戀三年谓苟,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片协怒。...
    茶點(diǎn)故事閱讀 39,919評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡涝焙,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出孕暇,到底是詐尸還是另有隱情仑撞,我是刑警寧澤,帶...
    沈念sama閱讀 35,635評(píng)論 5 345
  • 正文 年R本政府宣布妖滔,位于F島的核電站隧哮,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏座舍。R本人自食惡果不足惜沮翔,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,237評(píng)論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望曲秉。 院中可真熱鬧采蚀,春花似錦疲牵、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,855評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至璧眠,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間读虏,已是汗流浹背责静。 一陣腳步聲響...
    開封第一講書人閱讀 32,983評(píng)論 1 269
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留盖桥,地道東北人灾螃。 一個(gè)月前我還...
    沈念sama閱讀 48,048評(píng)論 3 370
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像揩徊,于是被迫代替她去往敵國(guó)和親腰鬼。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,864評(píng)論 2 354