發(fā)簡信
IP屬地：北京
-
阿里，頭條胶征，美團塞椎，快手大數(shù)據(jù)開發(fā)崗面試總結(jié)
從3月份開始，陸續(xù)面了阿里睛低，頭條忱屑，美團，快手四家公司的大數(shù)據(jù)開發(fā)崗位暇昂，近20場面試面下來挺耗費腦力的，不過結(jié)果還行伴嗡，除了頭條外急波，目前拿到了其他三...
-
Flink實戰(zhàn)| Flink+Redis實時防刷接口作弊
隨著人口紅利的慢慢削減，互聯(lián)網(wǎng)產(chǎn)品的廝殺愈加激烈瘪校，大家開始看好下沉市場的潛力澄暮，拼多多，趣頭條等廠商通過拉新獎勵阱扬，購物優(yōu)惠等政策率先搶占用戶泣懊，壯大...
-
知識圖譜在大數(shù)據(jù)中的應用隨著移動互聯(lián)網(wǎng)的發(fā)展，萬物互聯(lián)成為了可能麻惶，這種互聯(lián)所產(chǎn)生的數(shù)據(jù)也在爆發(fā)式地增長馍刮，而這些數(shù)據(jù)恰好可以作為分析關(guān)系的有效原料。如果說以往的智能分析專...
-
深度好文 | 資深技術(shù)Leader曹樂：如何成為技術(shù)大牛
雙生說：曹樂是典型學霸窃蹋，清華本碩卡啰，多年互聯(lián)網(wǎng)大廠研發(fā)經(jīng)驗，所以“資深”警没。我剛到新部門的時候匈辱，約各位合作部門的Leader請教，也算幫我做新崗位入...
-
Kafka如何徹底刪除topic及數(shù)據(jù)
更多大數(shù)據(jù)技術(shù)干貨杀迹，歡迎關(guān)注“大數(shù)據(jù)技術(shù)進階”微信公眾號亡脸。 前言：刪除kafka topic及其數(shù)據(jù)，嚴格來說并不是很難的操作树酪。但是浅碾，往往給ka...
-
MapReduce Shuffle 和 Spark Shuffle 原理概述
更多大數(shù)據(jù)技術(shù)干貨，歡迎關(guān)注“大數(shù)據(jù)技術(shù)進階”微信公眾號嗅回。 Shuffle簡介 Shuffle的本意是洗牌及穗、混洗的意思，把一組有規(guī)則的數(shù)據(jù)盡量打...
-
【轉(zhuǎn)載】mysql和hbase應用場景對比當我們對于數(shù)據(jù)結(jié)構(gòu)字段不夠確定或雜亂無章很難按一個概念去進行抽取的數(shù)據(jù)適合用使用什么數(shù)據(jù)庫绵载？答案是什么埂陆，如果我們使用的傳統(tǒng)數(shù)據(jù)庫苛白，肯定留有多余的...
-
【轉(zhuǎn)載】Spark 性能調(diào)優(yōu)0、背景上周四接到反饋焚虱，集群部分 spark 任務執(zhí)行很慢购裙，且經(jīng)常出錯，參數(shù)改來改去怎么都無法優(yōu)化其性能和解決頻繁隨機報錯的問題鹃栽□锫剩看了下任務的歷...
-
【轉(zhuǎn)載】Spark調(diào)優(yōu)（數(shù)據(jù)序列化和內(nèi)存調(diào)優(yōu)）
翻譯自Spark官網(wǎng)文檔：https://spark.apache.org/docs/2.1.0/tuning.html 前言 由于大多數(shù)Spa...