發(fā)簡信
IP屬地：湖北
-
使用PySpark編寫SparkSQL程序查詢Hive數據倉庫作業(yè)腳本采用Python語言編寫荒给，Spark為Python開發(fā)者提供了一個API-----PySpark，利用PySpark可以很方便的連接Hi...
-
利用大數據技術分析新浪財經美股行情學習大數據技術有一段時間了屹蚊，之前也寫過一些零零散散的博客瘾带，作為自己學習的一些記錄箭券，不過每篇博客都只是涵蓋部分技術毫炉。這次想寫一篇比較完整的博客萍肆，記...
-
Spark SQL 分組后取 top n 問題的解決方法
背景介紹 遇到一個需求缠导，用 Spark SQL 查詢每個分組的前 top n 個數據廉羔。由于一開始不知道 Spark SQL 有 row_numb...
-
用 python 爬取微博評論并手動分詞制作詞云最近上海好像有舉行個什么維吾爾族的秘密時裝秀，很好看的樣子酬核，不過我還沒時間看蜜另。但是微博上已經吵翻了天，原因是 好吧嫡意，這不是我們關心的举瑰，我的心里只...
-
解決 hadoop 進程 nodemanager 啟動后失效問題
在 yarn-site.xml 中添加 8031 是默認端口，可以改為其他非占用端口蔬螟，所有節(jié)點都需要照此修改此迅。 Nodemanager 為每個節(jié)...
-
利用hadoop分析微博評論對于大數據方向我還是個新手，本篇博客僅用于個人學習記錄旧巾，所以大家看看就好耸序。 正常的Hadoop業(yè)務的開發(fā)流程應該是這樣的 但是我偷了個懶，省去了...
-
50行Python代碼實現圖片轉字符畫本篇博客改編自實驗樓 通過本篇博客鲁猩，你可以將你喜歡的任意圖片轉換成對應的字符畫 最終效果 原理介紹 字符畫是一系列字符組合成的文本坎怪，看起來就像一...
-
利用Scrapy爬取豆瓣圖書并保存至Mysql數據庫Scrapy是一個純Python語言寫的爬蟲框架，本次用它來爬取豆瓣圖書的數據廓握。 準備工作 沒有安裝Scrapy的同學需要安裝一下搅窿，有兩種方式安...
-
ECharts中國地圖可視化代碼 - javascript代碼模板
需要用到的 js 文件：china.js , echarts.min.js , jquery-*.min.js