華安火車迷

@超級(jí)大海賊 如果是偶發(fā)性調(diào)用什燕，scroll會(huì)好一些卿闹，起碼省去了重復(fù)查詢

Elasticsearch 5.x 源碼分析（3）from size, scroll 和 search after

前兩天突然被業(yè)務(wù)部的同事問了一句：“我現(xiàn)在要做搜索結(jié)果全量導(dǎo)揭糕，該用哪個(gè)接口，性能要好的锻霎？”之前雖然是知道這三種方法都是可以做分頁的深度查詢著角，但是由于具體的代碼實(shí)現(xiàn)細(xì)節(jié)沒看過，...

華安火車迷

24846 27 35

華安火車迷

ES無法只搜nested 文檔的呀

Elasticsearch 5.x 源碼分析（14）你一定需要使用nested 類型嗎量窘？

很早之前就聽說nested字段的查詢效率要慢一個(gè)數(shù)量級(jí)雇寇，parent-children 查詢要慢2個(gè)數(shù)量級(jí)，一直是將信將疑的蚌铜，知道最近的一些慢查詢的排查終于踩到這坑上來,因此...

華安火車迷

4871 3 7 1

華安火車迷

@CDC12 這個(gè)沒辦法锨侯，數(shù)據(jù)庫都會(huì)有這個(gè)問題，2 的話也是沒辦法冬殃，scroll的語義就是單次的囚痴，不是用來傳遞或者保存將來用的

Elasticsearch 5.x 源碼分析（3）from size, scroll 和 search after

前兩天突然被業(yè)務(wù)部的同事問了一句：“我現(xiàn)在要做搜索結(jié)果全量導(dǎo)，該用哪個(gè)接口审葬，性能要好的深滚？”之前雖然是知道這三種方法都是可以做分頁的深度查詢，但是由于具體的代碼實(shí)現(xiàn)細(xì)節(jié)沒看過涣觉，...

華安火車迷

24846 27 35

華安火車迷

一起學(xué)習(xí)吧生兆，我們公司用2.4和window + watermark 的人很少，所以很多問題只能自己查

Spark Structured Streaming 2.4 踩的一些坑

最近參與一個(gè)公司大數(shù)據(jù)項(xiàng)目開始入坑Spark膝宁，Spark從2.0開始從RDD 的底層API轉(zhuǎn)向了面向Dataset/Dataframe 的高級(jí)API鸦难，Spark Stream...

華安火車迷

4515 5 9

華安火車迷

@CrackM5 是的合蔽，不然search after就沒意義了

Elasticsearch 5.x 源碼分析（3）from size, scroll 和 search after

前兩天突然被業(yè)務(wù)部的同事問了一句：“我現(xiàn)在要做搜索結(jié)果全量導(dǎo)，該用哪個(gè)接口介返，性能要好的拴事？”之前雖然是知道這三種方法都是可以做分頁的深度查詢沃斤，但是由于具體的代碼實(shí)現(xiàn)細(xì)節(jié)沒看過，...

華安火車迷

24846 27 35

華安火車迷

@超超_59b2 沒有挤聘，scroll就是會(huì)每次都移動(dòng)浮標(biāo)轰枝，發(fā)現(xiàn)錯(cuò)誤就重來吧

Elasticsearch 5.x 源碼分析（3）from size, scroll 和 search after

前兩天突然被業(yè)務(wù)部的同事問了一句：“我現(xiàn)在要做搜索結(jié)果全量導(dǎo)，該用哪個(gè)接口组去，性能要好的鞍陨？”之前雖然是知道這三種方法都是可以做分頁的深度查詢，但是由于具體的代碼實(shí)現(xiàn)細(xì)節(jié)沒看過从隆，...

華安火車迷

24846 27 35

華安火車迷

昨天下午被@loogson 兄追著問了一些ES下nested的性能問題诚撵，和他一起深鉆進(jìn)去一下子把posting list 機(jī)制和filter cache 的bitmap 機(jī)制...

華安火車迷

前言 又是一個(gè)超長(zhǎng)的標(biāo)題（攤手┓( ′?` )┏）。Spark Streaming 歷史比較悠久辛燥，也確實(shí)非常好用筛武，更重要的是，大家已經(jīng)用熟了挎塌，有的還做了不少工具了徘六，所以覺得這...

華安火車迷

One query thread per Shard? https://discuss.elastic.co/t/one-query-thread-per-shard/717...

華安火車迷

@黃云斌huangyunbin 敬請(qǐng)期待啦，黃總監(jiān)

再見2018榴都，你好2019

華安火車迷

402 2 0

華安火車迷

@要沒時(shí)間了_3c48 ES好像不支持自動(dòng)生成id吧？

十億級(jí)索引性能優(yōu)化的一些小經(jīng)驗(yàn)總結(jié)

這周是個(gè)忙碌的一周嘴高，忙著4.19大促的各種事情竿音，忙著幫業(yè)務(wù)上線，忙著開發(fā)拴驮，忙著對(duì)大索引的性能調(diào)優(yōu)春瞬，忙著模板的優(yōu)化，忙著支持?jǐn)U容套啤，今天忙著處理故障宽气，但靜下心來總結(jié)，總想寫點(diǎn)什么...

華安火車迷

4459 8 51

華安火車迷

如果你也遇到這類問題希望下面幾篇帖子能幫到你 Global ordinals全局順序 Terms aggregation performance high cardinali...