【Spark簡介】 Apache Spark是一個(gè)圍繞速度、易用性和復(fù)雜分析構(gòu)建的大數(shù)據(jù)處理框架禽捆。最初在2009年由加州大學(xué)伯克利分校的AMPL...
【什么是大數(shù)據(jù)、大數(shù)據(jù)技術(shù)】 大數(shù)據(jù)飘哨,又稱巨量資料胚想,指的是所涉及的數(shù)據(jù)資料量規(guī)模巨大到無法在合理時(shí)間內(nèi)通過傳統(tǒng)的應(yīng)用軟件工具進(jìn)行抓取、收集芽隆、管理...
wait浊服、notify、notifyAll t.interrupt(),t.isInterrupted(),Thread.interrupted...
Spark運(yùn)行模式 Spark 的運(yùn)行模式多種多樣胚吁、靈活多變牙躺,部署在單機(jī)上時(shí),既可以用本地模式運(yùn)行腕扶,也可以用偽分布式模式運(yùn)行孽拷,而當(dāng)以分布式集群的...
Hive 命令行 輸入$HIVE_HOME/bin/hive –H 或者 –help可以顯示幫助選項(xiàng): -d,–define <key=valu...
HBase存儲架構(gòu)圖 HBase Master 為Region server分配region 負(fù)責(zé)Region server的負(fù)載均衡 發(fā)現(xiàn)失效...
Avro([?vr?])是Hadoop的一個(gè)子項(xiàng)目,由Hadoop的創(chuàng)始人Doug Cutting(也是Lucene半抱,Nutch等項(xiàng)目的創(chuàng)始人)...
集群規(guī)劃 前期準(zhǔn)備 靜態(tài)IP設(shè)置$ vi /etc/sysconfig/network-scripts/ifcfg-eth0 賬號分配需要使用具...
說明 認(rèn)證(authentication):驗(yàn)證用戶所用的身份是否是對的 授權(quán)(authorization):驗(yàn)證用戶所用身份操作是否有權(quán)限 目...