![240](https://upload.jianshu.io/users/upload_avatars/13686625/7d3a38fb-f74f-4bf7-babf-5927caca6191.png?imageMogr2/auto-orient/strip|imageView2/1/w/240/h/240)
IP屬地:廣東
數(shù)據(jù)提取 排序比較器 生成標簽
配置Zookeeper環(huán)境變量 創(chuàng)建文件夾每臺機器都得建 編輯/opt/zookeeper-3.4/data/myid文件 hserver-1上...
驅動包--mysql-connector-java.jar 安裝mysql 進入mysql,執(zhí)行下面的代碼 創(chuàng)建hive用戶和hive_meta...
spark 2.3-hadoop-2.7 1.配置環(huán)境變量 2.修改spark-env.sh cp /opt/spark-2.3-hadoop-...
1.修改 /etc/sysconfig/network-scripts/ifcfg-enp0s3文件該文件根據(jù)自己機器情況而定积蔚,名字不一定相同那婉,...
Spark Streaming提供了滑動窗口操作的支持,從而讓我們可以對一個滑動窗口內的數(shù)據(jù)執(zhí)行計算操作顷扩。每次掉落在窗口內的RDD的數(shù)據(jù)规惰,會被聚...
開發(fā)環(huán)境: kafka 1.1.1 spark 2.3 Java代碼:
開發(fā)環(huán)境: spark 2.3 kafka 1.1.1 黑名單數(shù)據(jù)是從mysql中獲取的空厌。源數(shù)據(jù)是從kafka中獲取的钝诚,數(shù)據(jù)格式就是簡單的姓名颖御,...