4.Numpy與pandas

numpy和pandas的作用

numpy簡(jiǎn)單來說,就是用來做矩陣運(yùn)算的python包换途,pandas是基于numpy進(jìn)一步封裝的包

1.numpy基礎(chǔ)

# numpy運(yùn)行速度很快[注:%time是jupyter的寫法,ipython環(huán)境不支持]
# 普通數(shù)組
normal_list = range(10000)
%timeit [i**2 for i in normal_list]
#numpy數(shù)組  運(yùn)算速度快了一個(gè)量級(jí)
import numpy as np
np_list = np.arange(10000)
%timeit np_list**2
# numpy 是將*3 應(yīng)用到每一個(gè)元素上
np_list = np.ones(5)
np_list*3
# 初始化操作
np.zeros(5)
# 3*2的 0矩陣
print(np.zeros((3,2)))
# 5*5的 1矩陣
print(np.ones((5,5)))
# 6*6的 對(duì)角矩陣
print(np.eye(6))
# 普通轉(zhuǎn)numpy
normal_array = [[1,2,3],[4,5,6]]
np_array = np.array(normal_array)
print(np_array)
# linspace 等間距生成數(shù)
np.linspace(0,1,10)

2.numpy的復(fù)雜應(yīng)用

  1. 生成模擬股票的數(shù)據(jù) 200只股票写穴,兩年交易日 252*2
  2. 對(duì)股票數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析
# 生成服從正態(tài)分布的模擬數(shù)據(jù)币喧,這里指的是漲跌數(shù)據(jù)
stock_cnt = 200
view_days = 504
stock_day_change = np.random.standard_normal((stock_cnt,view_days))
print(stock_day_change)
# 獲取矩陣的寬高
print(stock_day_change.shape)
# 打印出前兩只股票前五天的漲跌情況
print(stock_day_change[0:2,:5])
# 打印最后兩只股票的最后五天漲跌情況
print(stock_day_change[-2:,-5:])

# 交換 上面的兩組數(shù)據(jù)淮逊,必須使用copy,拷貝源數(shù)據(jù),numpy是引用類型的
tmp = stock_day_change[:2,:5].copy()
stock_day_change[:2,:5] = stock_day_change[-2:,-5:]
stock_day_change[-2:,-5:] = tmp
print(stock_day_change[:2,:5])
print(stock_day_change[-2:,-5:])
print('類型轉(zhuǎn)換,小數(shù)轉(zhuǎn)int')
print(stock_day_change[-2:,-5:].astype(int))
print('保留兩位小數(shù):')
print(np.around(stock_day_change[-2:,-5:],2))

# numpy 中 np.nan代表空
test = stock_day_change[0:2,:5].copy()
test[0][0] = np.nan
print(test)

print('獲取每只股票前10個(gè)交易日最大漲幅  axis=1 代表掃描x軸  axis=0代表掃描y軸')
print(np.max(stock_day_change[:5,:10],axis=1))
print()
print('如果要獲取前10個(gè)交易日中每天 5只股票中的最大漲幅,axis=0')
m1 = np.max(stock_day_change[:5,:10],axis=0)
print(m1)
print('獲取10個(gè)交易日中每天 5只股票中的最大漲幅的是哪一只股票,使用argmax函數(shù)蚁趁,axis=0')
m2 = np.argmax(stock_day_change[:5,:10],axis=0)
print(m2)

print("第2天下標(biāo)為{}的股票漲幅最大裙盾,為:{}".format(m2[1],m1[1]))


print('求期望,標(biāo)準(zhǔn)差他嫡,方差')
tmp = stock_day_change[:5,:10].copy()
print('平均值:',np.mean(tmp,axis=1))
print('標(biāo)準(zhǔn)差:',np.std(tmp,axis=1))
print('方差:',np.var(tmp,axis=1))

3.pandas基礎(chǔ)

簡(jiǎn)單說明:pandas是基于numpy的封裝

import pandas as pd
frame = pd.DataFrame(stock_day_change)
# 顯示前五只股票的數(shù)據(jù)
frame.head(5)
# 顯示后五只股票的數(shù)據(jù)
frame.tail(5)
# 先來看一段精簡(jiǎn)版的代碼番官,代碼段 1
stock_symbols = ['股票'+str(x) for x in range(stock_day_change.shape[0])]
# stock_symbols
# 這段代碼是的意思如下, 代碼段2
stock_symbols_tmp = range(stock_day_change.shape[0])
res = []
for i in stock_symbols_tmp:
    res.append('股票'+str(i))
print(res)
# 上面代碼段1的寫法叫鏈表推導(dǎo)式
# 生成從2017-1-1 后504天的日期
days = pd.date_range('2017-1-1',periods=stock_day_change.shape[1],freq='1d')
# 把數(shù)據(jù)的列名改成對(duì)應(yīng)的日期
frame = pd.DataFrame(stock_day_change,index=res,columns=days)
frame.head(3)

# 換個(gè)維度看數(shù)據(jù) 轉(zhuǎn)置操作
frame_t = frame.T
frame_t.head(3)

# 采樣 每21天求平均值
frame_21 = frame_t.resample('21d').mean()
frame_21.head(5)

# 獲取某一只股票的數(shù)據(jù)
stock0 = frame_t['股票0']
stock0.head(5)
%matplotlib inline
# 想要繪制圖片在jupyter(現(xiàn)在這個(gè)編輯器叫jupyter)顯示钢属,需要加上%matplotlib inline
# 繪制股票漲跌徘熔,首先要將 舉個(gè)栗子:第一天 漲了0.5 第二天跌了0.3 繪制時(shí) 第一天繪制0.5 第二天繪制0.2(0.5-0.3)
# 因此需要將單只股票做 前一天加法
stock0.cumsum().plot()

學(xué)會(huì)股票類相關(guān)的操作,其他的數(shù)據(jù)就so easy啦
接下來介紹一個(gè)獲取真實(shí)股票數(shù)據(jù)的包 tushare

import tushare as ts
# 獲取所有的股票列表
all_stock = ts.get_stock_basics()
# 取前五個(gè)淆党,第一列code就是股票代碼
all_stock.head(5)
%matplotlib inline
# 獲取黑牛食品(002387)的數(shù)據(jù)酷师,并取開盤價(jià)讶凉,繪圖
ts.get_k_data('002387')['open'].plot()
# 這個(gè)數(shù)據(jù)就介紹到這里,之后會(huì)進(jìn)行時(shí)間序列數(shù)據(jù)分析預(yù)測(cè)還會(huì)用到
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末山孔,一起剝皮案震驚了整個(gè)濱河市懂讯,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌台颠,老刑警劉巖褐望,帶你破解...
    沈念sama閱讀 211,884評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異蓉媳,居然都是意外死亡譬挚,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,347評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門酪呻,熙熙樓的掌柜王于貴愁眉苦臉地迎上來减宣,“玉大人,你說我怎么就攤上這事玩荠∑犭纾” “怎么了?”我有些...
    開封第一講書人閱讀 157,435評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵阶冈,是天一觀的道長(zhǎng)闷尿。 經(jīng)常有香客問我,道長(zhǎng)女坑,這世上最難降的妖魔是什么填具? 我笑而不...
    開封第一講書人閱讀 56,509評(píng)論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮匆骗,結(jié)果婚禮上劳景,老公的妹妹穿的比我還像新娘。我一直安慰自己碉就,他們只是感情好盟广,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,611評(píng)論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著瓮钥,像睡著了一般筋量。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上碉熄,一...
    開封第一講書人閱讀 49,837評(píng)論 1 290
  • 那天桨武,我揣著相機(jī)與錄音,去河邊找鬼锈津。 笑死玻募,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的一姿。 我是一名探鬼主播七咧,決...
    沈念sama閱讀 38,987評(píng)論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼跃惫,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了艾栋?” 一聲冷哼從身側(cè)響起爆存,我...
    開封第一講書人閱讀 37,730評(píng)論 0 267
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎蝗砾,沒想到半個(gè)月后先较,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,194評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡悼粮,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,525評(píng)論 2 327
  • 正文 我和宋清朗相戀三年闲勺,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片扣猫。...
    茶點(diǎn)故事閱讀 38,664評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡菜循,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出申尤,到底是詐尸還是另有隱情癌幕,我是刑警寧澤,帶...
    沈念sama閱讀 34,334評(píng)論 4 330
  • 正文 年R本政府宣布昧穿,位于F島的核電站勺远,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏时鸵。R本人自食惡果不足惜胶逢,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,944評(píng)論 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望饰潜。 院中可真熱鬧初坠,春花似錦、人聲如沸囊拜。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,764評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽冠跷。三九已至,卻和暖如春身诺,著一層夾襖步出監(jiān)牢的瞬間蜜托,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,997評(píng)論 1 266
  • 我被黑心中介騙來泰國打工霉赡, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留橄务,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 46,389評(píng)論 2 360
  • 正文 我出身青樓穴亏,卻偏偏與公主長(zhǎng)得像蜂挪,于是被迫代替她去往敵國和親重挑。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,554評(píng)論 2 349

推薦閱讀更多精彩內(nèi)容