樓主鬼譬，你們的faiss向量是怎么更新的呢漏麦？通過add方法增量更新嗎劫拢？
Faiss - 部署安裝與Demo1. 概述 Faiss is a library for efficient similarity search and clustering of dense vector...
發(fā)簡信
IP屬地：山東
-
-
你們的faiss是怎么部署成服務(wù)的普监，已經(jīng)faiss里的向量怎么更新的呢耕渴？
看了很多關(guān)于faiss的文章暇咆，幾乎都是差不多這類型的demo低零，沒有工程化的實(shí)戰(zhàn)faiss 使用
添加faiss到python路徑 參照官網(wǎng)： https://github.com/facebookresearch/faiss/wiki/Getting-started I...
-
樓主实柠，你們的faiss里面的向量是怎么更新的水泉，這個(gè)向量不可能永遠(yuǎn)的都不更新吧？
faiss的一些相關(guān)調(diào)研
需求背景 目前有項(xiàng)目會(huì)涉及到向量的存儲(chǔ)和計(jì)算，以前的傳統(tǒng)搜索引擎lucene系產(chǎn)品和其他數(shù)據(jù)庫貌似都無法沒有比較良好有效的解決方案草则。對(duì)于機(jī)器學(xué)習(xí)領(lǐng)域來說钢拧，大部分經(jīng)過訓(xùn)練后的模...
-
因?yàn)楣緲I(yè)務(wù)需要，最近也在用 Spark的 MLib 進(jìn)行 LDA 模型的訓(xùn)練炕横，目前在Spark集群上完成模型的訓(xùn)練了源内，也 save 到了 hdfs 上保存著，模型文件將近 10G 份殿，現(xiàn)在困惑的是怎么集成我的 java 項(xiàng)目里姿锭，下面是我在 java 里寫的代碼：
def main(args: Array[String]): Unit = {
//啟動(dòng)一個(gè)spark集群
val conf= new SparkConf().setAppName("LDA-3")
.setMaster("spark://remote-ip:7077")
.setJars(Array("/Users/hzw/Desktop/QA/DeepQA/target/DeepQA-0.0.1-SNAPSHOT.jar"))
.set("spark.driver.maxResultSize", "10g")
.set("spark.executor.memory", "12g")
.set("spark.driver.memory", "2g")
.set("spark.executor.cores", "2")
val spark=SparkSession.builder().config(conf).getOrCreate()
//模型保存的 hdfs 地址
val model_path="hdfs://remote-ip:9000/spark-lda"
//加載訓(xùn)練好的模型
val model:LocalLDAModel=LocalLDAModel.load(spark.sparkContext, model_path)
println("test customer lda model......")
}
}
但這里總是報(bào)錯(cuò)，有幾點(diǎn)很困惑：
1伯铣、大佬在java項(xiàng)目里是怎么引入自己訓(xùn)練好的模型的呻此，樓主只是說了怎么用模型做預(yù)測，但我連模型也加載不進(jìn)來
2腔寡、訓(xùn)練好的模型焚鲜，正式上線使用的話，是運(yùn)行在spark集群中放前，還是直接在部署 java 項(xiàng)目的機(jī)器上跑（純粹使用本機(jī)的 cpu 來模擬 集群運(yùn)行模型）
3忿磅、我沒用 pipline 什么的，因?yàn)檫€不熟悉凭语，只是單純離線訓(xùn)練好模型葱她，然后想部署到 java 項(xiàng)目中使用
4、我是在自己的機(jī)器用 eclipse 來調(diào)試的如何在Java應(yīng)用里集成Spark MLlib訓(xùn)練好的模型做預(yù)測
前言 昨天媛媛說似扔，你是不是很久沒寫博客了吨些。我說上一篇1.26號(hào)，昨天3.26號(hào)炒辉，剛好兩個(gè)月豪墅，心中也略微有些愧疚。今天正好有個(gè)好朋友問黔寇，怎么在Java應(yīng)用里集成Spark ML...
-
很好奇問下作者偶器，你們用推薦系統(tǒng)在醫(yī)療網(wǎng)站上做什么？推薦什么呢....
推薦系統(tǒng)實(shí)踐-利用用戶行為數(shù)據(jù)（中）
此文是根據(jù)《推薦系統(tǒng)實(shí)踐》部分整理而來缝裤。 PART 1 基于鄰域的算法是推薦系統(tǒng)中最基本的算法屏轰，主要分為兩大類： 基于用戶的協(xié)同過濾算法 基于物品的協(xié)同過濾算法 第一部分介紹...
-
SDK使用記錄
簡單記錄在項(xiàng)目中使用過的SDK，以便快速集成一些功能 ***即時(shí)聊天*** 1.XMPP（沒用過） 2.WEBSOCKET憋飞，facebook有開源的項(xiàng)目 3.云信和環(huán)信 **...
-
怎么沒看到有哪個(gè)類實(shí)現(xiàn)了這個(gè)代理方法呢：
- (void)willOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer
LFVideoCapture通過GPUImageVideoCamera進(jìn)行視頻錄制霎苗，但卻沒看到哪里對(duì)數(shù)據(jù)進(jìn)行編
碼，樓主可以指導(dǎo)下嗎......iOS視頻直播初窺:高仿<喵播APP>
效果圖 由于licecap錄制的GIF失幀太嚴(yán)重, 都模糊掉了, 再放兩張高清截圖png1png2 前言 今年三月份搀崭，斗魚獲騰訊領(lǐng)投的1億美元融資的消息被各大平臺(tái)報(bào)道轉(zhuǎn)載叨粘，在...
-
IOS開發(fā)大牛博客列表
http://www.reibang.com/p/ebf3d971110a Casa Taloyum寫的關(guān)于iOS應(yīng)用架構(gòu)的文章非常好