問題 本周工作中遇到一個問題缠局，同事用Python和公司的db客戶端在團(tuán)隊的測試框架上實(shí)現(xiàn)連接池功能挣郭，db連接用的是pymysql岛马。但在跑demo時，出現(xiàn)了詭異的現(xiàn)象： 多次s...
發(fā)簡信
IP屬地：上海
-
記一次pymysql查詢不到表中最新插入的數(shù)據(jù)的問題
-
MySQL配置改為read committed后是不是茄靠，就不用設(shè)置autocommit為True了
記一次pymysql查詢不到表中最新插入的數(shù)據(jù)的問題
問題 本周工作中遇到一個問題，同事用Python和公司的db客戶端在團(tuán)隊的測試框架上實(shí)現(xiàn)連接池功能，db連接用的是pymysql载慈。但在跑demo時，出現(xiàn)了詭異的現(xiàn)象： 多次s...
-
sklearn 增量學(xué)習(xí)
對于大數(shù)據(jù)集珍手，在訓(xùn)練時會出現(xiàn)MemoryError 办铡。sklearn提供了幾種辦法，一是從根本上節(jié)省空間琳要，二是流式讀取寡具，三是節(jié)省每次運(yùn)行時的數(shù)據(jù)量。 1. 流式數(shù)據(jù) 要給算法...
-
HIVE常用命令之ANALYZE TABLE命令簡述上次講過HIVE 的一個常用命令 MSCK REPAIR TABLE 稚补， 這次講講HIVE的ANALYZE TABLE命令童叠，接下來還會講下Impala的 COMPUTE ST...
-
HIVE常用命令之MSCK REPAIR TABLE命令簡述
工作中發(fā)現(xiàn)很多同事連基礎(chǔ)的hive命令都不知道，所以準(zhǔn)備寫一個系列把hive一些常用的命令進(jìn)行一個總結(jié)课幕。第一個講的命令是MSCK REPAIR TABLE厦坛。 MSCK REP...
-
深度學(xué)習(xí)之神經(jīng)元
要了解深度學(xué)習(xí)，首先必須了解“深度學(xué)習(xí)”的前身：神經(jīng)網(wǎng)絡(luò)與神經(jīng)元的概念乍惊。 關(guān)于神經(jīng)網(wǎng)絡(luò)與深度學(xué)習(xí)的概念和區(qū)別杜秸，我在“機(jī)器學(xué)習(xí)（一）”那篇文章已經(jīng)展現(xiàn)就不贅述了。 深度學(xué)習(xí)可以...
-
重磅 解決 hadoop job 卡死 根源問題做大數(shù)據(jù)&&算法 其實(shí)最重要的三件事 润绎，就是 管理數(shù)據(jù) 和集群運(yùn)維 模型訓(xùn)練撬碟，一旦 遠(yuǎn)離這三個主題，大數(shù)據(jù)都無法發(fā)揮它應(yīng)用的作用凡橱。廢話不多說小作，這幾天主要是采坑了。我認(rèn)為現(xiàn)在...
-
Actor模型傳統(tǒng)的游戲服務(wù)器要么是單線程要么是多線程稼钩，過去幾十年里CPU一直遵循摩爾定律發(fā)展顾稀，帶來的結(jié)果是單核頻率越來越高。而近幾年摩爾定義在CPU上已然失效坝撑，為什么呢静秆？ 大于在2003...
-
優(yōu)秀的開發(fā)=扎實(shí)的計算機(jī)基礎(chǔ)+產(chǎn)品化思維
前言 編程是最重要也是最不重要的事 這是因為“編程是最重要也是最不重要的事”這是因為編程作為把思維變?yōu)閷?shí)現(xiàn)的這個循環(huán)的最后一步(然后寫好的程序會成為新的思考輸入和基礎(chǔ)粮揉，開始新...
-
java編譯期和運(yùn)行期何為運(yùn)行期？何為編譯期抚笔？ 編譯期是指編譯器將源代碼翻譯為機(jī)器能識別的代碼扶认，java為編譯為jvm認(rèn)識的字節(jié)碼文件。運(yùn)行期則是指java代碼的運(yùn)行過程殊橙。 編譯期編譯期 舉個例子...
-
生于憂患膨蛮，死于安樂叠纹。
-
Netty入門教程——認(rèn)識Netty什么是Netty？ Netty 是一個利用 Java 的高級網(wǎng)絡(luò)的能力敞葛，隱藏其背后的復(fù)雜性而提供一個易于使用的 API 的客戶端/服務(wù)器框架誉察。Netty 是一個廣泛使用的 J...
-
Elasticsearch趟坑記——后臺數(shù)據(jù)篇背景： 項目隸屬于用戶畫像服務(wù)，為了更好的支持前端查詢服務(wù)惹谐，決定將原有的HBase數(shù)據(jù)源切換成Elasticsearch(以下簡稱ES)持偏，從k-v型數(shù)據(jù)庫切到nosql。本以...
-
hdfs文件格式比較Hadoop中的文件格式大致上分為面向行和面向列兩類： 面向行：同一行的數(shù)據(jù)存儲在一起氨肌，即連續(xù)存儲鸿秆。SequenceFile,MapFile,Avro Datafile。采用...
-
《利用Python進(jìn)行數(shù)據(jù)分析·第2版》第1章 準(zhǔn)備工作《利用Python進(jìn)行數(shù)據(jù)分析·第3版》新版上市[https://u.jd.com/W8xSkzl]儒飒，新版使用的是Pandas 1.4谬莹，更新了不少內(nèi)容檩奠。為了幫助大家學(xué)習(xí)桩了，這次...
-
vnpy for Mac 安裝填坑
vnpy 是個基于python的開源量化交易框架，github地址：https://github.com/vnpy/vnpy埠戳。 官方文檔主要介紹的使用環(huán)境是windows和U...
-
Python-爬取知乎某個問題下的所有回答
作為一個Python小白井誉，在經(jīng)過一個大牛的安利下，迅速將魔爪伸向了Python整胃。作為一個小白颗圣，今天分享下已經(jīng)被大牛們玩壞的知乎爬蟲，各位看官你看好了屁使。 1. 我為什么要爬取回...
-
再談MySQL auto_increment空洞問題
在項目中偶爾會有這種需求在岂，用戶通過第三方系統(tǒng)登錄時如果尚未注冊，則自動給用戶注冊蛮寂，注冊過的用戶則自動登錄蔽午，更新最近登錄時間等信息。有時候圖省事可能就直接INSERT INTO...
