240 發(fā)簡信
IP屬地:香港
  • Spark2x on yarn日志配置詳解

    概述 Spark on Yarn的日志配置分為兩類: Spark on Yarn client模式 Spark on Yarn cluster模式 接下為大家逐一介紹淤毛。 Sp...

  • 120
    第三章 Yarn應(yīng)用設(shè)計

    概述 Yarn是一個資源的管理系統(tǒng)帕棉,負(fù)責(zé)集群的管理及調(diào)度市殷。如果想要一個應(yīng)用運行在Yarn蒋搜,需要編寫兩個組件: Client(客戶端)客戶端負(fù)責(zé)項目ResourceManage...

  • 120
    第二章 Yarn基礎(chǔ)庫

    簡介 與MRv1相比Yarn的設(shè)計要復(fù)雜得多册着。YARN借用了MRv1的一些底層基礎(chǔ)庫(如RPC庫),又引入了很多新的設(shè)計方式逃顶,它的基礎(chǔ)庫更多讨便,如:google的開源序列化框架...

  • 120
    第一章 Yarn簡介

    簡介 Yarn是Hadoop生態(tài)圈中的一個通用資源管理系統(tǒng)和調(diào)度平臺,產(chǎn)生于Hadoop2以政“园可為上層應(yīng)用提供統(tǒng)一的資源管理和調(diào)度,它的引入為集群在利用率妙蔗、資源統(tǒng)一管理和數(shù)據(jù)共...

  • Docker容器通過宿主機(jī)安裝JDK和MAVEN

    1傲霸,下載jdk和maven JDK http://www.oracle.com/technetwork/java/javase/downloads/jdk8-download...

  • Sqoop的使用

    1,什么是Sqoop sqoop是apache旗下一款“Hadoop和關(guān)系數(shù)據(jù)庫服務(wù)器之間傳送數(shù)據(jù)”的工具眉反。導(dǎo)入數(shù)據(jù):可以從MySQL昙啄,Oracle等關(guān)系數(shù)據(jù)庫中導(dǎo)入數(shù)據(jù)到H...

  • 120
    Hive的安裝

    1 前期準(zhǔn)備 1,需要搭建HDFS2寸五,需要搭建MapReduce3梳凛,安裝mysql( 其它數(shù)據(jù)庫都可以),如果不是很清楚安裝mysql,請查看 http://www.li...

  • Hadoop HA部署詳解

    1梳杏,前期準(zhǔn)備 1 修改Linux主機(jī)名2 修改IP3 修改主機(jī)名和IP的映射關(guān)系 /etc/hosts4 關(guān)閉防火墻5 ssh免登陸6 安裝JDK韧拒,配置環(huán)境變量等 2,集群規(guī)...

  • 120
    Mapreduce的經(jīng)典排序(快排 & 歸并)

    1十性,快速排序 基本思想:選擇一個基準(zhǔn)元素,通常選擇第一個元素或者最后一個元素,通過一趟掃描叛溢,將待排序列分成兩部分,一部分比基準(zhǔn)元素小,一部分大于等于基準(zhǔn)元素,此時基準(zhǔn)元素在其...

  • 120
    Java NIO(1) 概述

    什么是JavaNIO NIO全名(NewInput/ Output),在java1.4中引入。NIO是一種同步非阻塞的IO模型劲适。同步是指線程不斷輪詢IO事件是否就緒楷掉,非阻...

  • 第一章 Solr安裝

    本文是基于solr6.4和tomcat8.5進(jìn)行單機(jī)環(huán)境的安裝。 1霞势,準(zhǔn)備工作: 下載Solr-6.6.0 http://www.apache.org/dyn/clos...

亚洲A日韩AV无卡,小受高潮白浆痉挛av免费观看,成人AV无码久久久久不卡网站,国产AV日韩精品