建立自己的數(shù)據(jù)分析平臺

Python,R作為量化領(lǐng)域領(lǐng)域兩門主流的語言瓢阴,各有千秋,R語法比較“迂回”,加上先開始學(xué)習(xí)python,當(dāng)然會成為首選的工具語言擂送,python在數(shù)據(jù)分析方面有很多成熟的庫,所以如果在linux環(huán)境下布置自己的分析環(huán)境一定會有很多便利唯欣,很多券商例如華寶證券嘹吨,萬得,IB都有開放的 python api接口境氢,如果需要開發(fā)自己的交易平臺時這也會帶來很大便利蟀拷。

前面提到在linux系統(tǒng)下做部署有一些天然優(yōu)勢,但是所依賴的一系列工具都是一樣的萍聊,本來一直在使用ubuntu问芬,在部署環(huán)境開始時很順利,但是最后在安裝一個獲取國內(nèi)數(shù)據(jù)的包時受挫寿桨,可能一直以來都把Ubuntu做為跟window一樣的平臺去使用此衅,很多在ubuntu環(huán)境下的設(shè)置操作都不太熟練强戴,兩天找不到解決方案,就轉(zhuǎn)戰(zhàn)到windows環(huán)境下挡鞍,因為之前配置過ipython notebook骑歹,所以安裝很順利,下面主要介紹下windows下的設(shè)置步驟墨微。

1當(dāng)然所有的軟件都依賴最基層的python道媚,pip可以使我們在平臺上安裝一些依賴的包像在Linux系統(tǒng)下一樣方便,pip的安裝可以參考這篇文章http://dwz.cn/1dlBFo翘县。

2接下來需要安裝的軟件:numpy,pandas,tushare,matplotlib,scipy,lxml,xlwt.

其中numpy/scipy可以快速高效的進行數(shù)組和矩陣運算最域,python本事也自帶有數(shù)組運算的list容器,但是numpy可以省略代碼中很多的循環(huán)語句锈麸,這樣大大提高了效率羡宙,特別是在處理較大規(guī)模的數(shù)據(jù)時,具體效率高出多少掐隐,可以參考numpy指南一書中的例子狗热。

pandas由AQR Capital Management開發(fā),主要用于處理數(shù)據(jù)“沖突”和時間序列分析虑省,Pandas的名稱來自于面板數(shù)據(jù)(panel data)和python數(shù)據(jù)分析(data analysis)匿刮,同時它也是tushare庫的基礎(chǔ),在使用tushare之前必須先安裝pandas探颈,兩者操作的語法幾乎一樣熟丸,tushare一個財經(jīng)數(shù)據(jù)接口包,由國內(nèi)開發(fā)者在Pypi發(fā)布伪节,使用爬蟲系統(tǒng)從新浪財經(jīng)光羞,雅虎財經(jīng),以及上交所怀大,深交所提供的數(shù)據(jù)纱兑,十分強大,誰用誰知道化借。潜慎。官網(wǎng):http://tushare.waditu.com,作者微博:http://weibo.com/u/1304687120蓖康,你可以在官網(wǎng)看到你可以用tushare獲得的數(shù)據(jù)以及步驟铐炫。? 安裝tushare之前先安裝lxml,不然在讀取安裝地址時會出現(xiàn)錯誤蒜焊。

matplotlib用以數(shù)據(jù)的可視化倒信,比如繪制圖表等等,xlwt是一個可以把用python抓取的數(shù)據(jù)存入excel的工具泳梆,也可以存入csv文件鳖悠,當(dāng)然所以來的庫包含在pandas中旬陡,所以不用額外安裝治专,當(dāng)然如果想從excel中讀取數(shù)據(jù)可以安裝xlrd庫存眉抬。截一張安裝命令及成功截圖


介紹完了幾個主要庫的功能暖途,他們的安裝全都依靠一個命令:pip install xx,xx為你要安裝的庫,安裝順序以及必備的庫上面已經(jīng)介紹過瘾带,當(dāng)然這只是對初學(xué)者鼠哥,對于一些數(shù)據(jù)分析高手,比如經(jīng)常參加業(yè)內(nèi)比較出名的比賽kaggle看政,或者國內(nèi)由阿里巴巴組織的天池大數(shù)據(jù)比賽朴恳,你還需要更強大的工具,比如scikit-learn允蚣,可以用于機器學(xué)習(xí)和人工智能算法于颖,pyspark結(jié)合了大數(shù)據(jù)分析領(lǐng)域火熱的spark,在處理海量數(shù)據(jù)時可以使用嚷兔。好了森渐,這篇文章主要講述分析所以來的軟件和庫,下一篇會講利用這些庫進行一些入門工作冒晰。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末同衣,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子壶运,更是在濱河造成了極大的恐慌耐齐,老刑警劉巖,帶你破解...
    沈念sama閱讀 212,080評論 6 493
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件蒋情,死亡現(xiàn)場離奇詭異埠况,居然都是意外死亡,警方通過查閱死者的電腦和手機棵癣,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,422評論 3 385
  • 文/潘曉璐 我一進店門辕翰,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人浙巫,你說我怎么就攤上這事金蜀∷⒑螅” “怎么了的畴?”我有些...
    開封第一講書人閱讀 157,630評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長尝胆。 經(jīng)常有香客問我丧裁,道長,這世上最難降的妖魔是什么含衔? 我笑而不...
    開封第一講書人閱讀 56,554評論 1 284
  • 正文 為了忘掉前任煎娇,我火速辦了婚禮二庵,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘缓呛。我一直安慰自己催享,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 65,662評論 6 386
  • 文/花漫 我一把揭開白布哟绊。 她就那樣靜靜地躺著因妙,像睡著了一般。 火紅的嫁衣襯著肌膚如雪票髓。 梳的紋絲不亂的頭發(fā)上攀涵,一...
    開封第一講書人閱讀 49,856評論 1 290
  • 那天,我揣著相機與錄音洽沟,去河邊找鬼以故。 笑死,一個胖子當(dāng)著我的面吹牛裆操,可吹牛的內(nèi)容都是我干的怒详。 我是一名探鬼主播,決...
    沈念sama閱讀 39,014評論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼踪区,長吁一口氣:“原來是場噩夢啊……” “哼棘利!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起朽缴,我...
    開封第一講書人閱讀 37,752評論 0 268
  • 序言:老撾萬榮一對情侶失蹤善玫,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后密强,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體茅郎,經(jīng)...
    沈念sama閱讀 44,212評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,541評論 2 327
  • 正文 我和宋清朗相戀三年或渤,在試婚紗的時候發(fā)現(xiàn)自己被綠了系冗。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,687評論 1 341
  • 序言:一個原本活蹦亂跳的男人離奇死亡薪鹦,死狀恐怖掌敬,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情池磁,我是刑警寧澤奔害,帶...
    沈念sama閱讀 34,347評論 4 331
  • 正文 年R本政府宣布,位于F島的核電站地熄,受9級特大地震影響华临,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜端考,卻給世界環(huán)境...
    茶點故事閱讀 39,973評論 3 315
  • 文/蒙蒙 一雅潭、第九天 我趴在偏房一處隱蔽的房頂上張望揭厚。 院中可真熱鬧,春花似錦扶供、人聲如沸筛圆。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,777評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽顽染。三九已至,卻和暖如春轰绵,著一層夾襖步出監(jiān)牢的瞬間粉寞,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,006評論 1 266
  • 我被黑心中介騙來泰國打工左腔, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留唧垦,地道東北人。 一個月前我還...
    沈念sama閱讀 46,406評論 2 360
  • 正文 我出身青樓液样,卻偏偏與公主長得像振亮,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子鞭莽,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 43,576評論 2 349

推薦閱讀更多精彩內(nèi)容