大數(shù)據(jù)_zzzzMing

消費(fèi)組組（Consumer group）可以說是kafka很有亮點(diǎn)的一個(gè)設(shè)計(jì)莲蜘。傳統(tǒng)的消息引擎處理模型主要有兩種外邓，隊(duì)列模型，和發(fā)布-訂閱模型技即。 隊(duì)列模型：早期消息處理引擎就是按...

大數(shù)據(jù)_zzzzMing

在很多的流處理框架的介紹中，都會說kafka是一個(gè)可靠的數(shù)據(jù)源轮锥，并且推薦使用Kafka當(dāng)作數(shù)據(jù)源來進(jìn)行使用击蹲。這是因?yàn)榕c其他消息引擎系統(tǒng)相比，kafka提供了可靠的數(shù)據(jù)保存及備...

大數(shù)據(jù)_zzzzMing

本篇主要介紹kafka的分區(qū)和副本蕾久，因?yàn)檫@兩者是有些關(guān)聯(lián)的驰唬，所以就放在一起來講了，后面順便會給出一些對應(yīng)的配置以及具體的實(shí)現(xiàn)代碼，以供參考~ 1.kafka分區(qū)機(jī)制 分區(qū)機(jī)制...

大數(shù)據(jù)_zzzzMing

上一篇講述了什么是分布式一致性問題叫编，以及它難在哪里辖佣，liveness和satefy問題，和FLP impossibility定理搓逾。有興趣的童鞋可以看看分布式系統(tǒng)一致性問題與R...

大數(shù)據(jù)_zzzzMing

最近在做MIT6.824的幾個(gè)實(shí)驗(yàn)卷谈，真心覺得每一個(gè)做分布式相關(guān)開發(fā)的程序員都應(yīng)該去刷一遍（裂墻推薦），肯定能夠提高自己的技術(shù)認(rèn)知水平霞篡，同時(shí)也非常感謝MIT能夠把這么好的資源分...

大數(shù)據(jù)_zzzzMing

前情提要 Scala函數(shù)式編程指南（一） 函數(shù)式思想介紹 scala函數(shù)式編程（二） scala基礎(chǔ)語法介紹 Scala函數(shù)式編程（三） scala集合和函數(shù) Scala函數(shù)...

大數(shù)據(jù)_zzzzMing

前情提要 Scala函數(shù)式編程指南（一） 函數(shù)式思想介紹 scala函數(shù)式編程（二） scala基礎(chǔ)語法介紹 Scala函數(shù)式編程（三） scala集合和函數(shù) Scala函數(shù)...

大數(shù)據(jù)_zzzzMing

這次來說說函數(shù)式的數(shù)據(jù)結(jié)構(gòu)是什么樣子的世蔗，本章會先用一個(gè)list來舉例子說明，最后給出一個(gè)Tree數(shù)據(jù)結(jié)構(gòu)的練習(xí)朗兵，放在公眾號里面污淋，練習(xí)里面給出了基本的結(jié)構(gòu)，但代碼是空缺的需要補(bǔ)...

大數(shù)據(jù)_zzzzMing

相比于邏輯回歸余掖，在很多情況下寸爆，SVM算法能夠?qū)?shù)據(jù)計(jì)算從而產(chǎn)生更好的精度。而傳統(tǒng)的SVM只能適用于二分類操作盐欺，不過卻可以通過核技巧（核函數(shù)）赁豆，使得SVM可以應(yīng)用于多分類的任務(wù)...

大數(shù)據(jù)_zzzzMing

前情提要： 通俗地說邏輯回歸【Logistic regression】算法（一） 邏輯回歸模型原理介紹 上一篇主要介紹了邏輯回歸中，相對理論化的知識冗美，這次主要是對上篇做一點(diǎn)點(diǎn)...

大數(shù)據(jù)_zzzzMing

在說邏輯回歸前魔种，還是得提一提他的兄弟，線性回歸粉洼。在某些地方节预，邏輯回歸算法和線性回歸算法是類似的。但它和線性回歸最大的不同在于属韧，邏輯回歸是作用是分類的心铃。 還記得之前說的嗎，線性...

大數(shù)據(jù)_zzzzMing

前情提要：通俗得說線性回歸算法（一）線性回歸初步介紹 一.sklearn線性回歸詳解 1.1 線性回歸參數(shù) 介紹完線性回歸挫剑，那么我們來看看如何運(yùn)用sklearn來調(diào)用線性回歸...

大數(shù)據(jù)_zzzzMing

一.從線性回歸的故事說起 相信大家都聽過著名的博物學(xué)家去扣，達(dá)爾文的大名，而今天這個(gè)故事的主人公就是他的表弟高爾頓樊破。 高爾頓是一名生理學(xué)家愉棱，在1995年的時(shí)候，他研究了1078堆...

大數(shù)據(jù)_zzzzMing

前情提要： scala函數(shù)式編程（二） scala基礎(chǔ)語法介紹 scala函數(shù)式編程（二） scala基礎(chǔ)語法介紹 前面已經(jīng)稍微介紹了scala的常用語法以及面向?qū)ο蟮囊恍┖?..

大數(shù)據(jù)_zzzzMing

相信很多同學(xué)都想通過閱讀一些框架的源碼朋其，來提高自己的代碼能力王浴，但往往在第一步，搭建環(huán)境的時(shí)候就碰了壁梅猿。 本篇就來介紹下如何在Windows下氓辣，將最新版的Spark2.4.3編...

大數(shù)據(jù)_zzzzMing

上一篇我們講了關(guān)聯(lián)分析的幾個(gè)概念，支持度袱蚓，置信度钞啸，提升度。以及如何利用Apriori算法高效地根據(jù)物品的支持度找出所有物品的頻繁項(xiàng)集喇潘。 Python --深入淺出Aprior...

大數(shù)據(jù)_zzzzMing

在美國有這樣一家奇怪的超市体斩，它將啤酒與尿布這樣兩個(gè)奇怪的東西放在一起進(jìn)行銷售，并且最終讓啤酒與尿布這兩個(gè)看起來沒有關(guān)聯(lián)的東西的銷量雙雙增加颖低。這家超市的名字叫做沃爾瑪絮吵。 你會不...

大數(shù)據(jù)_zzzzMing

前情提要 通俗地說決策樹算法（一）基礎(chǔ)概念介紹 通俗地說決策樹算法（二）實(shí)例解析 上面兩篇介紹了那么多決策樹的知識，現(xiàn)在也是時(shí)候來實(shí)踐一下了忱屑。Python有一個(gè)著名的機(jī)器學(xué)習(xí)...

大數(shù)據(jù)_zzzzMing

總是寫技術(shù)文章蹬敲，偶爾也想寫點(diǎn)別的。 今天來說說美國十年國債倒掛這件事想幻，我會從經(jīng)濟(jì)學(xué)中的利息的角度來解釋分析，讓你明白為什么會說美國國債倒掛是一種經(jīng)濟(jì)衰退的信號话浇。同時(shí)你也會明白...