將文件傳送給Solr服務器

用post.jar將XML或JSON文件傳送到Solr服務器

在Solr中對XML和JSON文件的方式非常簡單,直接用post.jar就可以了酥宴,但是這些文件需要符合一定的格式纲辽,如:
  XML文檔

要添加的xml文檔示例

文檔需要用<add>標簽包圍起來颜武,告訴Solr需要添加這個文檔到索引中。文檔的內容被包裹在<doc>標簽里面拖吼,上面示例的文檔為了能使用shema.xml中的Dynamic Field解析鳞上,給每個field都添加了后綴。
  將上面的XML文檔添加到Solr中只需要執(zhí)行java -jar post.jar fileName.xml即可吊档。

JSON文檔

Json文檔示例

每一個需要創(chuàng)建索引的文檔都是一個JSON對象篙议,但是將JSON文件發(fā)送給Solr的時候需要執(zhí)行的語句為:java -Dtype=application/json -jar post.jar fileName.json
  在-jar之前需要告訴solr這個是一個什么格式的文件。查看post.jar支持的選項怠硼,可以運行java -jar post.jar --help.

SolrJ

SolrJ是一個基于java的client library鬼贱,可以用來與Solr服務器進行連接。
  一個使用SolrJ將文件添加到solr服務器并執(zhí)行搜索所有文件的例子:

public class ExampleSolrJClient {
    public static void main(String[] args) throws Exception {
        String serverUrl = (args != null && args.length > 0) ? args[0] : "http://localhost:8983/solr/collection1";
        SolrServer solr = new HttpSolrServer(serverUrl);
        SolrInputDocument doc1 = new SolrInputDocument();
        doc1.setField("id", "1");
        doc1.setField("screen_name_s", "@thelabdude");
        doc1.setField("type_s", "post");
        doc1.setField("lang_s", "en");
        doc1.setField("timestamp_tdt", "2012-05-22T09:30:22Z/HOUR");
        doc1.setField("favorites_count_ti", "10");
        doc1.setField("text_t", "#Yummm :) Drinking a latte " + "at Caffe Grecco in SF's historic North Beach... "
                + "Learning text analysis with#SolrInAction " + "by @ManningBooks on my i-Pad");
        solr.add(doc1);
        SolrInputDocument doc2 = new SolrInputDocument();
        doc2.setField("id", "2");
        doc2.setField("screen_name_s", "@thelabdude");
        doc2.setField("type_s", "post");
        doc2.setField("lang_s", "en");
        doc2.setField("timestamp_tdt", "2012-05-22T09:30:22Z/HOUR");
        doc2.setField("favorites_count_ti", "10");
        doc2.setField("text_t",
                "Just downloaded the ebook of " + "#SolrInAction from @ManningBooks http://bit.ly/T3eGYG "
                        + "to learn more about #Solr http://bit.ly/3ynriE");
        doc2.addField("link_ss", "http://manning.com/grainger/");
        doc2.addField("link_ss", "http://lucene.apache.org/solr/");
        solr.add(doc2);
        solr.commit(true, true);
        for (SolrDocument next : simpleSolrQuery(solr, "*:*", 10)) {
            prettyPrint(System.out, next);
        }
    }

    static SolrDocumentList simpleSolrQuery(SolrServer solr, String query, int rows) throws SolrServerException {
        SolrQuery solrQuery = new SolrQuery(query);
        solrQuery.setRows(rows);
        QueryResponse resp = solr.query(solrQuery);
        SolrDocumentList hits = resp.getResults();
        return hits;
    }

    static void prettyPrint(PrintStream out, SolrDocument doc) {
        List<String> sortedFieldNames = new ArrayList<String>(doc.getFieldNames());
        Collections.sort(sortedFieldNames);
        out.println();
        for (String field : sortedFieldNames) {
            out.println(String.format("\t%s: %s", field, doc.getFieldValue(field)));
        }
        out.println();
    }
}

上面的示例代碼分為兩個部分香璃,第一部分將文件添加到Solr服務器这难,第二部分對Solr服務器中的所有文件搜索。
  將文件添加到Solr服務器:

創(chuàng)建SolrServer對象葡秒,指定Solr服務器地址姻乓;
  創(chuàng)建SolrInputDocument對象,創(chuàng)建兩個document眯牧;
  用SolrServer對象的add()方法將文件添加到Solr服務器蹋岩,之后執(zhí)行commit方法,否則新的文件不會被檢索到学少。

搜索Solr服務器中的所有文件:

創(chuàng)建SolrQuery對象剪个,指定查詢語句“:”;
  創(chuàng)建QueryResponse對象版确,接收查詢結果扣囊。

從示例代碼可以看出,通過SolrJ接口可以很容易的實現(xiàn)與Solr服務器的連接阀坏,文件的添加如暖,查詢,以及接收返回的結果忌堂。

Data Import Handler(DIH)

DIH是Solr對外部數(shù)據源盒至,如網站或關系型數(shù)據庫的擴展。DIH支持Oracle士修、Postgres枷遂、MySQL或者MS SQL Server等。從高層次來說棋嘲,你只需要提供數(shù)據庫的連接參數(shù)以及SQL查詢語句酒唉,DIH對數(shù)據庫進行查詢并將返回的結果轉換為document。

Nutch

Nutch是一個基于java的開源爬蟲沸移,Nutch可以將web頁面爬下來并解析成Solr可以檢索的格式痪伦。

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末侄榴,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子网沾,更是在濱河造成了極大的恐慌癞蚕,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,386評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件辉哥,死亡現(xiàn)場離奇詭異桦山,居然都是意外死亡,警方通過查閱死者的電腦和手機醋旦,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,142評論 3 394
  • 文/潘曉璐 我一進店門恒水,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人饲齐,你說我怎么就攤上這事钉凌。” “怎么了箩张?”我有些...
    開封第一講書人閱讀 164,704評論 0 353
  • 文/不壞的土叔 我叫張陵甩骏,是天一觀的道長。 經常有香客問我先慷,道長饮笛,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,702評論 1 294
  • 正文 為了忘掉前任论熙,我火速辦了婚禮福青,結果婚禮上,老公的妹妹穿的比我還像新娘脓诡。我一直安慰自己无午,他們只是感情好,可當我...
    茶點故事閱讀 67,716評論 6 392
  • 文/花漫 我一把揭開白布祝谚。 她就那樣靜靜地躺著宪迟,像睡著了一般。 火紅的嫁衣襯著肌膚如雪交惯。 梳的紋絲不亂的頭發(fā)上次泽,一...
    開封第一講書人閱讀 51,573評論 1 305
  • 那天,我揣著相機與錄音席爽,去河邊找鬼意荤。 笑死,一個胖子當著我的面吹牛只锻,可吹牛的內容都是我干的玖像。 我是一名探鬼主播,決...
    沈念sama閱讀 40,314評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼齐饮,長吁一口氣:“原來是場噩夢啊……” “哼捐寥!你這毒婦竟也來了笤昨?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 39,230評論 0 276
  • 序言:老撾萬榮一對情侶失蹤上真,失蹤者是張志新(化名)和其女友劉穎咬腋,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體睡互,經...
    沈念sama閱讀 45,680評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,873評論 3 336
  • 正文 我和宋清朗相戀三年陵像,在試婚紗的時候發(fā)現(xiàn)自己被綠了就珠。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,991評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡醒颖,死狀恐怖妻怎,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情泞歉,我是刑警寧澤逼侦,帶...
    沈念sama閱讀 35,706評論 5 346
  • 正文 年R本政府宣布,位于F島的核電站腰耙,受9級特大地震影響榛丢,放射性物質發(fā)生泄漏。R本人自食惡果不足惜挺庞,卻給世界環(huán)境...
    茶點故事閱讀 41,329評論 3 330
  • 文/蒙蒙 一晰赞、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧选侨,春花似錦掖鱼、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,910評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至晨仑,卻和暖如春褐墅,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背寻歧。 一陣腳步聲響...
    開封第一講書人閱讀 33,038評論 1 270
  • 我被黑心中介騙來泰國打工掌栅, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人码泛。 一個月前我還...
    沈念sama閱讀 48,158評論 3 370
  • 正文 我出身青樓猾封,卻偏偏與公主長得像,于是被迫代替她去往敵國和親噪珊。 傳聞我的和親對象是個殘疾皇子晌缘,可洞房花燭夜當晚...
    茶點故事閱讀 44,941評論 2 355

推薦閱讀更多精彩內容

  • Spring Boot 參考指南 介紹 轉載自:https://www.gitbook.com/book/qbgb...
    毛宇鵬閱讀 46,815評論 6 342
  • Spring Cloud為開發(fā)人員提供了快速構建分布式系統(tǒng)中一些常見模式的工具(例如配置管理齐莲,服務發(fā)現(xiàn),斷路器磷箕,智...
    卡卡羅2017閱讀 134,657評論 18 139
  • 我發(fā)現(xiàn)我現(xiàn)在可真的是挺能白話选酗。別人白話用嘴。我們平時一說這個人能白話岳枷,用的最形象的話就是:此人說起話來那是口若懸...
    六瓣丁香閱讀 240評論 0 0
  • 畢業(yè)了兩年芒填,第一次失業(yè)了,學的計算機空繁,女殿衰,92年出生,想從web前端轉行盛泡,在求職的一周內闷祥,每天至少面試兩家,終于體...
    limpid戀空閱讀 245評論 2 0
  • 夜是星的海傲诵。這句話是我寫的凯砍。 記不得有多長時間,自己沒有這么的“文藝”了拴竹。仿佛是從暑假在家開始悟衩,自己便沒有在兩點之...
    小坤坤萌萌噠閱讀 265評論 0 1