摘要：Spark，局部敏感哈希吨拍，矢量檢索褪猛，推薦系統(tǒng) 使用背景 最近有個(gè)需求做百萬級別實(shí)體的相關(guān)推薦，離線場景算完入庫接口調(diào)用羹饰，數(shù)倉和計(jì)算引擎基于Hive和Spark伊滋，一開始設(shè)...
發(fā)簡信
IP屬地：北京
-
Spark LSH 近似最近鄰矢量檢索：LinkedInAttic ScANNS項(xiàng)目學(xué)習(xí)和工程使用 -
LSH局部敏感哈希：原理笑旺，Python手撕LSH實(shí)現(xiàn)embedding近鄰檢索摘要：局部敏感哈希，Python馍资，矢量檢索筒主，推薦系統(tǒng) 單獨(dú)記錄一下LSH算法的原理，結(jié)合代碼深入理解一下鸟蟹，因?yàn)檫@個(gè)算法的調(diào)參對結(jié)果影響極大乌妙，不懂原理就不會調(diào)參，導(dǎo)致最終效果不...
-
Catboost-在線預(yù)測
生產(chǎn)環(huán)境很多時(shí)候是需要實(shí)時(shí)對數(shù)據(jù)進(jìn)行預(yù)測的建钥，即離線訓(xùn)練好模型后將模型保存為模型文件藤韵，然后在線服務(wù)將模型加載到內(nèi)存 引入pom.xml 樣例代碼 需要注意的地方 catboos...
-
Catboost-算法原理
總結(jié)一下catboost關(guān)鍵的知識點(diǎn) Target Statistics 常規(guī)處理類別特征的方法是one-hot，但是也可以將類別特征轉(zhuǎn)化為和label相關(guān)的數(shù)值特征熊经，也就是...
-
Python集合操作
列表(List)泽艘、映射(Dict)、集合(Set)是python的三種基本數(shù)據(jù)結(jié)構(gòu)镐依，日常的工作中需要熟練掌握它們的基本操作函數(shù) List 添加元素 尾部添加元素：append...
-
Hive常用函數(shù)
假設(shè)現(xiàn)在有一個(gè)訂單表(order)匹涮，里面有3個(gè)字段：uid、item_id(商品id)槐壳、price焕盟、ts(時(shí)間戳) uid item_id price tsu1 i1 ...
-
【內(nèi)推】字節(jié)跳動-Android研發(fā)(實(shí)習(xí))
全部崗位:https://job.toutiao.com/s/eeVPfFs[https://job.toutiao.com/s/eeVPfFs] Android開發(fā)實(shí)習(xí)生 ...
-
【內(nèi)推】字節(jié)跳動-iOS研發(fā)(實(shí)習(xí))
全部崗位: https://job.toutiao.com/s/eeV5Uba[https://job.toutiao.com/s/eeV5Uba] iOS研發(fā)實(shí)習(xí)生 — 抖...
-
【內(nèi)推】字節(jié)跳動-抖音搜索
全部崗位: https://jobs.bytedance.com/experienced/position?keywords=%E6%90%9C%E7%B4%A2&categ...
-
本專題由前程無憂網(wǎng)（www.51job.com）校園招聘部官方設(shè)立绍哎。歡迎大家投稿。凡收錄本專題的文章均有機(jī)會出現(xiàn)在我們的公眾號上鞋真，我們的微信公眾號是：51job校園招聘崇堰。轉(zhuǎn)發(fā)時(shí)，我們會注明出處。并對文章進(jìn)行打賞海诲，若在我們公眾號閱讀過萬繁莹，還有更多打賞。另外特幔，您還有機(jī)會：1咨演、成為51job校園招聘公眾號特約作者。2蚯斯、51job高校俱樂部成員并可參加線下活動薄风。3、世界500強(qiáng)企業(yè)的內(nèi)推機(jī)會拍嵌。4遭赂、名企校招公眾號特約編輯。5横辆、與職場達(dá)人面對面交流撇他。聯(lián)系我們：微信號xy51job
-
hexo主題bug修復(fù)
問題描述 在使用snippet主題時(shí)出現(xiàn)首頁頁面分頁功能出現(xiàn)異常，樣式如下: 首頁時(shí)最后多出一個(gè)按鈕 尾頁時(shí)前面多出一個(gè)按鈕 解決過程 step 1. 查看頁面源代碼定位出問...
-
Mac配置JAVA_HOME
由于一些原因重新配置電腦JAVA環(huán)境狈蚤，發(fā)現(xiàn)與有些不同所以記錄以備以后使用困肩。jdk官網(wǎng)下載地址。 查看java版本 ,沒有下載//在終端輸入下面命令來查看是否有java環(huán)境有則...
-
java 依賴包沖突炫惩，使用maven的Shade方式解決
java 依賴包沖突僻弹，使用maven的Shade方式解決 [TOC] 問題描述 程序中同時(shí)使用了hadoop工具包與ElasticSearch工具導(dǎo)致jar包。程序報(bào)錯(cuò)： j...
-
-
hive的查詢注意事項(xiàng)以及優(yōu)化總結(jié)
Hive是將符合SQL語法的字符串解析生成可以在Hadoop上執(zhí)行的MapReduce的工具粘咖。使用Hive盡量按照分布式計(jì)算的一些特點(diǎn)來設(shè)計(jì)sql蚣抗，和傳統(tǒng)關(guān)系型數(shù)據(jù)庫有區(qū)別，...
