今天來(lái)給大家介紹三個(gè)我在學(xué)習(xí) Python 路上幫助比較大的堪稱(chēng)神級(jí)的網(wǎng)站巾陕，尤其是對(duì)于剛剛?cè)腴T(mén)的同學(xué)來(lái)說(shuō)，絕對(duì)不容錯(cuò)過(guò)~ pythontutor 這個(gè)網(wǎng)站對(duì)于新手同學(xué)理解代碼...
發(fā)簡(jiǎn)信
IP屬地：海南
-
新手學(xué)習(xí)Python的三個(gè)神級(jí)網(wǎng)站 -
Guava中這些Map的騷操作划鸽，讓我的代碼量減少了50%
原創(chuàng)：微信公眾號(hào) 碼農(nóng)參上输莺，歡迎分享，轉(zhuǎn)載請(qǐng)保留出處裸诽。 Guava是google公司開(kāi)發(fā)的一款Java類(lèi)庫(kù)擴(kuò)展工具包嫂用，內(nèi)含了豐富的API，涵蓋了集合丈冬、緩存嘱函、并發(fā)、I/O等多個(gè)...
-
TCP的三次握手與四次揮手
簡(jiǎn)介 TCP是一種面向連接的殷蛇、可靠的实夹、基于字節(jié)流的傳輸層通信協(xié)議，在發(fā)送數(shù)據(jù)前粒梦，通信雙方必須在彼此間建立一條連接亮航。所謂的“連接”，其實(shí)是客戶(hù)端和服務(wù)端保存的一份關(guān)于對(duì)方的信息...
-
Python-csvkit：強(qiáng)大的csv文件命令行工具如果你在學(xué)Python數(shù)據(jù)處理匀们，一定對(duì)CSV文件不陌生缴淋。日常本地?cái)?shù)據(jù)存儲(chǔ)中，除了Excel文件外泄朴，大部分?jǐn)?shù)據(jù)都是以CSV文件格式保存的重抖。 CSV（Comma-Separate...
-
shell 日期變量按小時(shí)遞增
data_hour=2022033100 data_hour_next=2022033101 day_id=${data_hour:0:8} day_id_next=${da...
-
HashMap 1.81.8 HashMap HashMap主要是數(shù)組+單鏈表+紅黑樹(shù)組成。其實(shí)就是在一定條件下祖灰，數(shù)組index下的單鏈表轉(zhuǎn)化成紅黑樹(shù)钟沛，這是提升查找效率的。 原來(lái)jdk1.7的優(yōu)點(diǎn)...
-
Hive SQL語(yǔ)句執(zhí)行順序Hive 中 sql 語(yǔ)句的執(zhí)行順序如下： from .. where .. join .. on .. select .. group by .. select .. ha...
-
Python 操作Excel 基礎(chǔ)1. 老版本：xls 使用的相關(guān)模塊：xlrd叁扫、xlwt、xlutils畜埋。因?yàn)槔习姹镜膃xcel的操作是將讀莫绣、寫(xiě)、修改分開(kāi)的悠鞍，其中xlrd用于讀对室、xlwt用于寫(xiě)、xlutil...
-
正則表達(dá)式神器咖祭，以后再也不用百度了當(dāng)有項(xiàng)目需求用到正則表達(dá)式掩宜，你會(huì)怎么做？打開(kāi)百度直接搜索「手機(jī)號(hào)正則表達(dá)式」心肪，復(fù)制到 IDE 運(yùn)行一下看一看符不符合自己的期望锭亏？ 是不是常常因?yàn)檎也坏胶线m的表達(dá)式，深?lèi)和唇^硬鞍。...
-
HiveSQL優(yōu)化總結(jié)
列裁剪和分區(qū)裁剪 最基本的操作。所謂列裁剪就是在查詢(xún)時(shí)只讀取需要的列戴已，分區(qū)裁剪就是只讀取需要的分區(qū)固该。當(dāng)列很多或者數(shù)據(jù)量很大時(shí)，如果select *或者不指定分區(qū)糖儡，全列掃描和全...
-
數(shù)倉(cāng)|Hive性能調(diào)優(yōu)指北
在企業(yè)中使用Hive構(gòu)建離線(xiàn)數(shù)倉(cāng)是一種十分普遍的方案伐坏。盡管Hive的使用場(chǎng)景是通過(guò)批處理的方式處理大數(shù)據(jù)，通常對(duì)處理時(shí)間不敏感握联。但是在資源有限的情況下桦沉，我們需要關(guān)注Hive的...
-
-
hive調(diào)優(yōu)實(shí)戰(zhàn)系列文章-hive調(diào)優(yōu)和問(wèn)題排查思路本文將介紹Hive調(diào)優(yōu)的整體過(guò)程纯露，以及本人對(duì)Hive調(diào)優(yōu)過(guò)程的一些思考，包括Hive調(diào)優(yōu)的一般步驟代芜，和調(diào)優(yōu)方法埠褪。 1，Hive一般優(yōu)化方法 1挤庇，查看HiveSQL執(zhí)行計(jì)劃 H...
-
-
-
hive3.x on spark3.0生產(chǎn)調(diào)優(yōu)實(shí)踐1 數(shù)據(jù)傾斜 絕大部分任務(wù)都很快完成，只有一個(gè)或者少數(shù)幾個(gè)任務(wù)執(zhí)行的很慢甚至最終執(zhí)行失敗昆咽，這樣的現(xiàn)象為數(shù)據(jù)傾斜現(xiàn)象驾凶。 將數(shù)據(jù)傾斜分為單表攜帶了 GroupBy 字段的查詢(xún)和兩...
