Python信息采集器使用輕量級關系型數(shù)據(jù)庫SQLite

1追逮,引言

Python自帶一個輕量級的關系型數(shù)據(jù)庫SQLite蜀铲。這一數(shù)據(jù)庫使用SQL語言郑象。SQLite作為后端數(shù)據(jù)庫,可以搭配Python建網(wǎng)站倘屹,或者為python網(wǎng)絡爬蟲存儲數(shù)據(jù)银亲。SQLite還在其它領域有廣泛的應用,比如HTML5和移動端纽匙。

Python標準庫中的sqlite3提供該數(shù)據(jù)庫的接口务蝠。

2,Python對SQLite進行操作示例

以下的代碼將創(chuàng)建一個簡單的關系型數(shù)據(jù)庫烛缔,為一個書店存儲書的分類和價格馏段。數(shù)據(jù)庫中包含兩個表:category用于記錄分類轩拨,book用于記錄某本書的信息。一本書歸屬于某一個分類院喜,因此book有一個外鍵(foreign key)亡蓉,指向catogory表的主鍵id。

2.1 創(chuàng)建數(shù)據(jù)庫

首先喷舀,創(chuàng)建數(shù)據(jù)庫砍濒,以及數(shù)據(jù)庫中的表。在使用connect()連接數(shù)據(jù)庫后硫麻,就可以通過定位指針cursor梯影,來執(zhí)行SQL命令:

importsqlite3# test.db is a file in the working directory.conn = sqlite3.connect("test.db")c = conn.cursor()# create tablesc.execute('''CREATE TABLE category

(id int primary key, sort int, name text)''')c.execute('''CREATE TABLE book

(id int primary key,

sort int,

name text,

price real,

category int,

FOREIGN KEY (category) REFERENCES category(id))''')# save the changesconn.commit()# close the connection with the databaseconn.close()

SQLite的數(shù)據(jù)庫是一個磁盤上的文件,如上面的test.db庶香,因此整個數(shù)據(jù)庫可以方便的移動或復制。test.db一開始不存在简识,所以SQLite將自動創(chuàng)建一個新文件赶掖。

利用execute()命令,執(zhí)行了兩個SQL命令七扰,創(chuàng)建數(shù)據(jù)庫中的兩個表奢赂。創(chuàng)建完成后,保存并斷開數(shù)據(jù)庫連接颈走。

2.2 插入數(shù)據(jù)

上面創(chuàng)建了數(shù)據(jù)庫和表膳灶,確立了數(shù)據(jù)庫的抽象結構。下面將在同一數(shù)據(jù)庫中插入數(shù)據(jù):

import sqlite3conn = sqlite3.connect("test.db")c = conn.cursor()books = [(1,1, 'Cook Recipe',3.12,1), (2,3, 'Python Intro',17.5,2), (3,2, 'OS Intro',13.6,2), ]# execute"INSERT"c.execute("INSERT INTO category VALUES (1, 1, 'kitchen')")# using the placeholderc.execute("INSERT INTO category VALUES (?, ?, ?)", [(2,2, 'computer')])# execute multiple commandsc.executemany('INSERT INTO book VALUES (?, ?, ?, ?, ?)', books)conn.commit()conn.close()

插入數(shù)據(jù)同樣可以使用execute()來執(zhí)行完整的SQL語句立由。SQL語句中的參數(shù)轧钓,使用"?"作為替代符號,并在后面的參數(shù)中給出具體值锐膜。這里不能用Python的格式化字符串毕箍,如"%s",因為這一用法容易受到SQL注入攻擊道盏。

也可以用executemany()的方法來執(zhí)行多次插入而柑,增加多個記錄。每個記錄是表中的一個元素荷逞,如上面的books表中的元素媒咳。

2.3 查詢

在執(zhí)行查詢語句后,Python將返回一個循環(huán)器种远,包含有查詢獲得的多個記錄涩澡。循環(huán)讀取,也可以使用sqlite3提供的fetchone()和fetchall()方法讀取記錄:

importsqlite3conn = sqlite3.connect('test.db')c= conn.cursor()# retrieve one recordc.execute('SELECTnameFROMcategoryORDERBYsort')print(c.fetchone())print(c.fetchone())# retrieve all recordsasa listc.execute('SELECT*FROMbookWHEREbook.category=1')print(c.fetchall())# iterate through the recordsforrowinc.execute('SELECTname, priceFROMbookORDERBYsort'):print(row)

2.4 更新與刪除

可以更新某個記錄院促,或者刪除記錄:

conn = sqlite3.connect("test.db")c = conn.cursor()c.execute('UPDATEbookSETprice=?WHEREid=?',(1000, 1))

c.execute('DELETEFROMbookWHEREid=2')

conn.commit()

conn.close()

也可以直接刪除整張表:

c.execute('DROP TABLE book')

如果刪除test.db筏养,那么整個數(shù)據(jù)庫會被刪除斧抱。

3,總結

sqlite3是一個SQLite的接口渐溶。想要熟練的使用SQLite數(shù)據(jù)庫辉浦,需要學習關系型數(shù)據(jù)庫的知識。在一些場景下茎辐,Python網(wǎng)絡爬蟲可以使用SQLite存儲采集到的網(wǎng)頁信息宪郊。GooSeeker爬蟲DS打數(shù)機將在7.x版本支持SQLite,不妨想想一下Python網(wǎng)絡爬蟲與DS打數(shù)機連接在一起會怎樣拖陆。

最后小編自己也是一個有著6年工作經驗的工程師弛槐,關于python編程,自己有做材料的整合依啰,一個完整的python編程學習路線乎串,學習資料和工具。想要這些資料的可以關注小編速警,加入python學習交流Q群735967233叹誉。

?著作權歸作者所有,轉載或內容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市闷旧,隨后出現(xiàn)的幾起案子长豁,更是在濱河造成了極大的恐慌,老刑警劉巖忙灼,帶你破解...
    沈念sama閱讀 217,509評論 6 504
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件匠襟,死亡現(xiàn)場離奇詭異,居然都是意外死亡该园,警方通過查閱死者的電腦和手機酸舍,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,806評論 3 394
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來爬范,“玉大人父腕,你說我怎么就攤上這事∏嗥伲” “怎么了璧亮?”我有些...
    開封第一講書人閱讀 163,875評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長斥难。 經常有香客問我枝嘶,道長,這世上最難降的妖魔是什么哑诊? 我笑而不...
    開封第一講書人閱讀 58,441評論 1 293
  • 正文 為了忘掉前任群扶,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘竞阐。我一直安慰自己缴饭,他們只是感情好,可當我...
    茶點故事閱讀 67,488評論 6 392
  • 文/花漫 我一把揭開白布骆莹。 她就那樣靜靜地躺著颗搂,像睡著了一般。 火紅的嫁衣襯著肌膚如雪幕垦。 梳的紋絲不亂的頭發(fā)上丢氢,一...
    開封第一講書人閱讀 51,365評論 1 302
  • 那天,我揣著相機與錄音先改,去河邊找鬼疚察。 笑死,一個胖子當著我的面吹牛仇奶,可吹牛的內容都是我干的貌嫡。 我是一名探鬼主播,決...
    沈念sama閱讀 40,190評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼该溯,長吁一口氣:“原來是場噩夢啊……” “哼衅枫!你這毒婦竟也來了?” 一聲冷哼從身側響起朗伶,我...
    開封第一講書人閱讀 39,062評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎步咪,沒想到半個月后论皆,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經...
    沈念sama閱讀 45,500評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡猾漫,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 37,706評論 3 335
  • 正文 我和宋清朗相戀三年点晴,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片悯周。...
    茶點故事閱讀 39,834評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡粒督,死狀恐怖,靈堂內的尸體忽然破棺而出禽翼,到底是詐尸還是另有隱情屠橄,我是刑警寧澤,帶...
    沈念sama閱讀 35,559評論 5 345
  • 正文 年R本政府宣布闰挡,位于F島的核電站锐墙,受9級特大地震影響,放射性物質發(fā)生泄漏长酗。R本人自食惡果不足惜溪北,卻給世界環(huán)境...
    茶點故事閱讀 41,167評論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧之拨,春花似錦茉继、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,779評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至乙墙,卻和暖如春颖变,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背听想。 一陣腳步聲響...
    開封第一講書人閱讀 32,912評論 1 269
  • 我被黑心中介騙來泰國打工腥刹, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人汉买。 一個月前我還...
    沈念sama閱讀 47,958評論 2 370
  • 正文 我出身青樓衔峰,卻偏偏與公主長得像,于是被迫代替她去往敵國和親蛙粘。 傳聞我的和親對象是個殘疾皇子垫卤,可洞房花燭夜當晚...
    茶點故事閱讀 44,779評論 2 354

推薦閱讀更多精彩內容