Pandas使用筆記

Pandas是用來(lái)生成可視化表格屹培,并且對(duì)表格進(jìn)行運(yùn)算的据德『粒可以將numpy的數(shù)據(jù)進(jìn)行生成表格棍辕。在學(xué)習(xí)Q-Learning的時(shí)候需要使用該工具版仔,可以簡(jiǎn)化表格的更新過(guò)程誊锭。并且提供比較規(guī)整的可視化數(shù)據(jù)馒吴,也可以進(jìn)一步的保存表格寺晌。

生成API

  • pd.Series() => 傳入數(shù)組俭厚,生成列表
  • pd.date_range('20160101',periods=6) => 生成時(shí)間列表
  • pd.DataFrame(np.random.randn(row_num, column_num),index=[], columns=[]) => 將numpy生成的shape數(shù)據(jù)格式化row和columns都有意義的表格户魏。index是每行名稱,column是每列的名稱挪挤。
  • a.dtypes => 打印出每列的格式
  • a.index => 輸出行序號(hào)
  • a.columns => 輸出列序號(hào)
  • a.values => 輸出所有值
  • a.decribe => 可以輸出每列的屬性
  • a.T => 轉(zhuǎn)置矩陣
  • a.sort_index(axis = 1, acending=False) => 對(duì)列名稱進(jìn)行排序叼丑,倒序
  • a.sort_values(by='E') => 對(duì)哪一列的值進(jìn)行排序
  • a.pop(column_name) => 彈出一列
  • a.insert(index, column_name, column_data) => column_data是Series類(lèi)型的數(shù)據(jù),可以通過(guò)np來(lái)生成扛门,Series(np_array)

索引API

  • a[column_name] => 輸出column_name列的元素幢码,也可以直接加入新行
  • a[min:max] => 輸出[min, max)之間的元素,可以是行也可以是列
  • a.loc[label] => 根據(jù)label進(jìn)行選擇行,只能根據(jù)標(biāo)簽篩選
  • a.loc[:,[label1,label2]] => 所有的行尖飞,對(duì)列進(jìn)行篩選
  • a.iloc[index_min:index_max, column_min:column_max] => 支持切片症副、和直接篩選,是索引的篩選
  • a.ix[index_num, label] => 進(jìn)行行和列的索引和標(biāo)簽混合篩選
  • b[a.column>8] => 對(duì)于b表篩選政基,輸出a.column>8的所有元素贞铣,或者是對(duì)b.column進(jìn)行篩選
  • pd.get_dummies(a, prefix = 'a') => 直接生成one-hot向量

處理丟失數(shù)據(jù)

  • a.dropna(axis=0,how='any') => 任何一個(gè)包含nan元素的行會(huì)被丟棄how = {'any','all'}
  • a.fillna(value=0) => 用0去填充nan元素
  • a.isnull() => 檢查是否有缺失數(shù)據(jù),返回BOOL值的表格,np.any(a.isnull()==True),這樣式輸出一個(gè)BOOL值沮明,方便看

處理文件

  • a.read_csv() => 讀取csv文件辕坝,excel表格
  • a.to_pickle() => 保存成pickle文件

合并表格

  • a.concat([df1,df2,df3], axis=0, ignore_index=True) => 0是豎直方向,1是橫方向荐健,上下合并,忽略之前的index
  • a.concat([df1,df2,df3], axis=1, join=inner/outer) => 用來(lái)處理index和label名稱不一樣的情況,inner保留交集酱畅,outer保留并集琳袄,沒(méi)有的元素用NAN來(lái)填充,
  • a.concat([df1,df2,df3], axis=1, join_axis=[df1.index]) => 左右合并的時(shí)候,處理交集
  • df1.append([df2, df3]) => 將df2和df3合并到df1纺酸,
  • df.append(series) => 可以直接添加一行
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末窖逗,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子餐蔬,更是在濱河造成了極大的恐慌碎紊,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,214評(píng)論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件樊诺,死亡現(xiàn)場(chǎng)離奇詭異仗考,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)词爬,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,307評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門(mén)秃嗜,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人顿膨,你說(shuō)我怎么就攤上這事锅锨。” “怎么了虽惭?”我有些...
    開(kāi)封第一講書(shū)人閱讀 152,543評(píng)論 0 341
  • 文/不壞的土叔 我叫張陵橡类,是天一觀的道長(zhǎng)蛇尚。 經(jīng)常有香客問(wèn)我芽唇,道長(zhǎng),這世上最難降的妖魔是什么取劫? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,221評(píng)論 1 279
  • 正文 為了忘掉前任匆笤,我火速辦了婚禮,結(jié)果婚禮上谱邪,老公的妹妹穿的比我還像新娘炮捧。我一直安慰自己,他們只是感情好惦银,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,224評(píng)論 5 371
  • 文/花漫 我一把揭開(kāi)白布咆课。 她就那樣靜靜地躺著,像睡著了一般扯俱。 火紅的嫁衣襯著肌膚如雪书蚪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 49,007評(píng)論 1 284
  • 那天迅栅,我揣著相機(jī)與錄音殊校,去河邊找鬼。 笑死读存,一個(gè)胖子當(dāng)著我的面吹牛为流,可吹牛的內(nèi)容都是我干的呕屎。 我是一名探鬼主播,決...
    沈念sama閱讀 38,313評(píng)論 3 399
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼敬察,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼秀睛!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起静汤,我...
    開(kāi)封第一講書(shū)人閱讀 36,956評(píng)論 0 259
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤琅催,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后虫给,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體藤抡,經(jīng)...
    沈念sama閱讀 43,441評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 35,925評(píng)論 2 323
  • 正文 我和宋清朗相戀三年抹估,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了缠黍。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,018評(píng)論 1 333
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡药蜻,死狀恐怖瓷式,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情语泽,我是刑警寧澤贸典,帶...
    沈念sama閱讀 33,685評(píng)論 4 322
  • 正文 年R本政府宣布,位于F島的核電站踱卵,受9級(jí)特大地震影響廊驼,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜惋砂,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,234評(píng)論 3 307
  • 文/蒙蒙 一妒挎、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧西饵,春花似錦酝掩、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,240評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至驯嘱,卻和暖如春镶苞,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背宙拉。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,464評(píng)論 1 261
  • 我被黑心中介騙來(lái)泰國(guó)打工宾尚, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 45,467評(píng)論 2 352
  • 正文 我出身青樓煌贴,卻偏偏與公主長(zhǎng)得像御板,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子牛郑,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,762評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容