numpy.loadtxt() 處理csv文件的正確姿勢(shì)


loadtxt()函數(shù)概述

函數(shù)loadtxt用于從文本加載數(shù)據(jù),我們可以利用該方法把數(shù)據(jù)讀取到np.array中然后做進(jìn)一步的數(shù)據(jù)處理郑气,詳細(xì)信息如下:

def loadtxt(fname, dtype=float, comments='#', delimiter=None,

? ? ? ? ? ? converters=None, skiprows=0, usecols=None, unpack=False,

? ? ? ? ? ? ndmin=0, encoding='bytes', max_rows=None):

Returns: ndarray

其中具體的參數(shù)含義如下:

fname要讀取的文件、文件名蛹稍、或生成器羽峰。

dtype數(shù)據(jù)類(lèi)型,默認(rèn)float呵扛。

comments注釋。

delimiter分隔符格筐带。

skiprows跳過(guò)前幾行讀取今穿,默認(rèn)是0,必須是int整型伦籍。

usecols:要讀取哪些列蓝晒,0是第一列。例如帖鸦,usecols = (1,5)將提取第2和第6列芝薇。默認(rèn)讀取所有列。

unpack如果為T(mén)rue作儿,將分列讀取, 例如x, y, z = loadtxt(...)

encoding 編碼格式

max_rows 讀取的最大行數(shù)

converters 字典類(lèi)型洛二,對(duì)某列數(shù)據(jù)類(lèi)型進(jìn)行轉(zhuǎn)換,例如{0:float}

ndmin 指定生成數(shù)組的維度

loadtxt實(shí)戰(zhàn)

我們舉一個(gè)例子來(lái)講解其讀寫(xiě)csv文件的應(yīng)用

創(chuàng)建一個(gè)csv文件,內(nèi)容如下:

id,cpu,mem

1,0.00%,0B / 0B

2,0.00%,577.6MiB / 1GiB

3,0.00%,44KiB / 30.92GiB

4,0.00%,0B / 0B

5,0.00%,0B / 0B

6,0.00%,0B / 0B

7,0.00%,0B / 0B

8,0.01%,703.5MiB / 2GiB

9,0.00%,48KiB / 30.92GiB

10,0.00%,618.9MiB / 2GiB

實(shí)例1

x,y,z=np.array(np.loadtxt('D:/data/log10.csv',dtype=str,delimiter=',',unpack=True,encoding='utf-8',max_rows=5))

print(x)

print(y)

print(z)

輸出:

['1' '2' '3' '4' '5']

['0.00%' '0.00%' '0.00%' '0.00%' '0.00%']

['0B / 0B' '577.6MiB / 1GiB' '44KiB / 30.92GiB' '0B / 0B' '0B / 0B']

可以看到:

我們把csv三列的數(shù)據(jù)分別賦值給了x,y,z, 使用unpack=True

數(shù)組中的值都是String類(lèi)型攻锰,使用dtype=str

Csv中有10行數(shù)據(jù)晾嘶,但是數(shù)組中保存了5行,因?yàn)槭褂胢ax_rows=5

數(shù)組中沒(méi)有輸出 id娶吞,cpu垒迂,mem等信息,因?yàn)槟J(rèn)skiprows=0會(huì)將首行過(guò)濾

使用delimiter=',作為csv數(shù)據(jù)的分隔符'

實(shí)例2

arr=np.array(np.loadtxt('D:/data/log10.csv',dtype=str,delimiter=',',usecols = (1,2),encoding='utf-8',max_rows=5))

print(arr)

輸出

[['0.00%' '0B / 0B']

?['0.00%' '577.6MiB / 1GiB']

?['0.00%' '44KiB / 30.92GiB']

?['0.00%' '0B / 0B']

?['0.00%' '0B / 0B']]

可以看到:

只顯示了csv中的第一列和第二列數(shù)據(jù)妒蛇,usecols = (1,2)

因?yàn)闆](méi)有使用unpack=True机断,所以整體作為一個(gè)二維數(shù)組進(jìn)行輸出

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末楷拳,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子吏奸,更是在濱河造成了極大的恐慌欢揖,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,270評(píng)論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件苦丁,死亡現(xiàn)場(chǎng)離奇詭異浸颓,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)旺拉,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,489評(píng)論 3 395
  • 文/潘曉璐 我一進(jìn)店門(mén)产上,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人蛾狗,你說(shuō)我怎么就攤上這事晋涣。” “怎么了沉桌?”我有些...
    開(kāi)封第一講書(shū)人閱讀 165,630評(píng)論 0 356
  • 文/不壞的土叔 我叫張陵谢鹊,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我留凭,道長(zhǎng)佃扼,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,906評(píng)論 1 295
  • 正文 為了忘掉前任蔼夜,我火速辦了婚禮兼耀,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘求冷。我一直安慰自己瘤运,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,928評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布匠题。 她就那樣靜靜地躺著拯坟,像睡著了一般。 火紅的嫁衣襯著肌膚如雪韭山。 梳的紋絲不亂的頭發(fā)上郁季,一...
    開(kāi)封第一講書(shū)人閱讀 51,718評(píng)論 1 305
  • 那天,我揣著相機(jī)與錄音钱磅,去河邊找鬼巩踏。 笑死,一個(gè)胖子當(dāng)著我的面吹牛续搀,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播菠净,決...
    沈念sama閱讀 40,442評(píng)論 3 420
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼禁舷,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼彪杉!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起牵咙,我...
    開(kāi)封第一講書(shū)人閱讀 39,345評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤派近,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后洁桌,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體渴丸,經(jīng)...
    沈念sama閱讀 45,802評(píng)論 1 317
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,984評(píng)論 3 337
  • 正文 我和宋清朗相戀三年另凌,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了谱轨。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 40,117評(píng)論 1 351
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡吠谢,死狀恐怖土童,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情工坊,我是刑警寧澤献汗,帶...
    沈念sama閱讀 35,810評(píng)論 5 346
  • 正文 年R本政府宣布,位于F島的核電站王污,受9級(jí)特大地震影響罢吃,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜昭齐,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,462評(píng)論 3 331
  • 文/蒙蒙 一尿招、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧司浪,春花似錦泊业、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,011評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至租谈,卻和暖如春篮奄,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背割去。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,139評(píng)論 1 272
  • 我被黑心中介騙來(lái)泰國(guó)打工窟却, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人呻逆。 一個(gè)月前我還...
    沈念sama閱讀 48,377評(píng)論 3 373
  • 正文 我出身青樓夸赫,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親咖城。 傳聞我的和親對(duì)象是個(gè)殘疾皇子茬腿,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,060評(píng)論 2 355

推薦閱讀更多精彩內(nèi)容