發(fā)簡信
IP屬地：河北
-
-
在輕松氣氛中淺談——Apache KylinCsdn我自己的賬號下同步更新此篇：https://blog.csdn.net/w635614017/article/details/82801573 一.Kylin是什么惠昔？...
-
你好衫哥，我想問一下，為什么在采集nginx日志時锥累，每臺機器啟動一個agent侍匙，然后所有機器先合并到一個flume，再sink到kafka中觅捆。直接flume-kafka中赦役，不合并會有什么影響
-
Flume之采集Nginx的日志Flume是一種分布式，可靠且可用的服務(wù)栅炒，用于有效地收集掂摔，聚合和移動大量日志數(shù)據(jù)。 它具有基于流數(shù)據(jù)流的簡單靈活的架構(gòu)赢赊。 它具有可靠的可靠性機制和許多故障轉(zhuǎn)移和恢復(fù)機制乙漓，具有...
-
你好，我想問一下域携，為什么在采集nginx日志時簇秒，每臺機器啟動一個agent，然后所有機器先合并到一個flume秀鞭，再sink到kafka中趋观。直接flume-kafka中，不合并會有什么影響
Flume之采集Nginx的日志
Flume是一種分布式锋边，可靠且可用的服務(wù)皱坛，用于有效地收集，聚合和移動大量日志數(shù)據(jù)豆巨。 它具有基于流數(shù)據(jù)流的簡單靈活的架構(gòu)剩辟。 它具有可靠的可靠性機制和許多故障轉(zhuǎn)移和恢復(fù)機制，具有...
-
新博客地址： <a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.zhihu.com%2Fpeople%2Fallwefantasy" target="_blank">https://www.zhihu.com/people/allwefantasy</a>
-
大佬，kafka->DStream->dataframe->生成臨時的HFile->保存到HBASE上萍膛，這些在一個文件里能實現(xiàn)嗎吭服。日志量比較大，是json格式的蝗罗。
我用這種方法寫完之后報錯：
scala.reflect.internal.Symbols$CyclicReference: illegal cyclic reference involving object InterfaceAudience
assertion failed: no symbol could be loaded from interface org.apache.hadoop.hbase.classification.InterfaceAudience$Public in object InterfaceAudience with name Public and classloader sun.misc.Launcher$AppClassLoader@18b4aac2Spark：DataFrame寫HFile （Hbase）一個列族艇棕、一個列擴展一個列族、多個列
擴展:Spark:DataFrame生成HFile 批量導(dǎo)入Hbase在上一篇博文中遺留了一個問題串塑，就是只能處理DataFrame 的一行一列,雖然給出一個折中的辦法處理多個...
-
大佬沼琉，kafka->DStream->dataframe->生成臨時的HFile->保存到HBASE上，這些在一個文件里能實現(xiàn)嗎桩匪。日志量比較大打瘪，是json格式的。
我用這種方法寫完之后報錯：
scala.reflect.internal.Symbols$CyclicReference: illegal cyclic reference involving object InterfaceAudience
assertion failed: no symbol could be loaded from interface org.apache.hadoop.hbase.classification.InterfaceAudience$Public in object InterfaceAudience with name Public and classloader sun.misc.Launcher$AppClassLoader@18b4aac2 -
在代碼里直接load桃移，以及生成keyvalue時一次處理多列，這些小編有解決嗎
Spark:DataFrame生成HFile 批量導(dǎo)入Hbase
批量加載-Bulk Load 在工作過程中有個需求葛碧，需要將DataFrame的數(shù)據(jù)保存進(jìn)Hbase,并且在Spark集群并沒有安裝Hbase,此時對于常規(guī)的使用put將Dat...
-
分享前端进泼、職場蔗衡、學(xué)習(xí)
-
在大公司實習(xí)六個月后的收獲
從大三的暑假開始，我就一直在某互聯(lián)網(wǎng)公司一直實習(xí)到來年的一月份乳绕，算起來也六個月了绞惦，經(jīng)歷過這六個月的洗禮，頗有感想洋措，假如自己沒有這段經(jīng)歷的話济蝉，或許自己會錯失職場和技術(shù)上的收獲。...
-
-
程序員的十年工作創(chuàng)業(yè)血淚史，萬字長文滓鸠，仔細(xì)讀完雁乡，受益匪淺吉日噶拉（在外企、上市公司工作過糜俗，自己也創(chuàng)業(yè)失敗過踱稍，遇到過很多失敗挫折，甚至露宿街頭悠抹，但是最后還是挺過來了）珠月，是一個十幾年的程序員了，本文介紹了他的相關(guān)經(jīng)歷楔敌，以及他的一些經(jīng)驗...
-
-
如齊而至 ——QYF
在看得見的地方梁丘，我的眼睛和你在一起侵浸；在看不見的地方旺韭，我的心和你在一起氛谜。 你的模樣，愛情的模樣 這世上最幸運的区端，是有人一直在想念你值漫。所謂溫暖從來都不是單...
-
以前是我的以前，以后是我們的以后 ——寫給放不下過去的你
很久以前织盼，我以為杨何，只要我對別人好酱塔，能忍讓，就會換來相同的回報危虱。 很久以后羊娃，我終于發(fā)現(xiàn)，有些東西埃跷，任你多么努力蕊玷，依舊抓不住，所以我學(xué)著不再期待弥雹。 很久以前垃帅，聽《十年...
-
窗外，依舊風(fēng)凌亂剪勿，夜沉沉
1 ·. 夜沉沉贸诚，風(fēng)凌亂。 坐在電腦前厕吉，許久酱固，許久，寫不出一個字头朱。 那一刻媒怯，我的心，被堵上了一道墻髓窜，無法進(jìn)也無法出扇苞，只能靜默等待。其實寄纵，我知道鳖敷，真的知道，...
-
不將就
姑娘程拭，你準(zhǔn)備指望什么呢定踱？ 你不渴望一場浪漫的校園戀愛， 因為你有目標(biāo)在遠(yuǎn)方恃鞋； 你不想要一個平淡的生活崖媚， 因為你希望以后能夠買得起自己想要的高跟鞋； 你不明白成功的味道都多甜恤浪，...
-
怕記起
又到了吃糖炒栗子的時節(jié)畅哑， 那時那日你放在我口袋的栗子殼， 那時那刻你的溫暖懷抱水由， 那時那刻你的深情注視…… 我終究沒有太喜歡糖炒栗子荠呐， 卻一直記得你很喜歡， 也一直記得你最喜...
