是一個負載均衡服務器（AWS），作用通常有兩個： 根據(jù)應用流量自動完成請求的分發(fā) 彈性的伸縮資源以應對流量的變化 AWS ELB優(yōu)勢 High availability 眾所...
發(fā)簡信
IP屬地：廣東
-
-
大數(shù)據(jù)，數(shù)據(jù)倉庫蚓曼，hive不能使用update更新操作解決方案在數(shù)據(jù)倉庫建設牵现，處理日常業(yè)務需求的過程中怀估，經(jīng)常會遇到各種各樣的問題常侦。在處理更新操作數(shù)據(jù)時星爪，遇到數(shù)據(jù)重復問題疆栏。前期因為沒考慮到關系型數(shù)據(jù)庫update操作曾掂，把數(shù)據(jù)同步到hive...
-
hive存儲parquet表parquet格式的表在生產(chǎn)環(huán)境中經(jīng)常被使用到，具有列式存儲和壓縮等特點壁顶，我們怎么在hive中存儲parquet格式的表呢珠洗。 使用數(shù)據(jù) 這里使用oracle的emp表 創(chuàng)建p...
-
PySpark之select、collect操作Select操作 在PySpark中若专，select()函數(shù)是用來從DataFrame結構中選擇一個或多個列许蓖，同樣可以選擇嵌套的列。select()在PySpark中是一個tr...
-
django項目使用boto3進行文件存儲+S3 Browser配置項目中的圖片需要上傳到Amazon S3云存儲服務上调衰，所以項目中添加相關配置及代碼（當前bucket已經(jīng)存在） settings.py文件中設置 編寫公共模塊AwsS3.py...
-
python操作hdfs
hdfs模塊時python的一個第三方庫,可以允許直接對hadoop的hdfs模塊進行訪問. 安裝 安裝hadoop 關于hadoop的安裝配置會在另一篇文章中介紹,這里只介...
-
pyspark 寫入hive表的方式
一：API saveAsTable 會根據(jù)表的schema匹配df的字段進行存儲 insertInto膊爪，要求表的schema與df必須一致才可以 對于Hive分區(qū)...
-
初識Prophet模型（一）-- 理論篇目錄 1、Prophet 簡介 2嚎莉、Prophet 適用場景 3米酬、Prophet 算法的輸入輸出 4、Prophet 算法原理 5趋箩、Prophet 使用時可設置的參數(shù) 6赃额、P...
-
異常值檢測-滑動均值實現(xiàn)智能告警瘋狂學習起來吧加派，metis里用了EWMA的。這篇講得比較細致跳芳。 URL： https://blog.csdn.net/xsdxs/article/details/716081...
