干貨分享!簡析Python配置文件中一些常見土辩、實用的寫法支救!

今天為大家科普的內(nèi)容 是Python 中的配置文件,這些配置文件中又有哪些常見拷淘、實用的寫法呢各墨?下面由我來為大家做一個簡單的歸納。

src=http___ww4.sinaimg.cn_large_9150e4e5gy1g682jtl12ig208c08c748.gif&refer=http___www.sina.gif

前言: 為什么要寫配置文件

各位在學(xué)習(xí)開發(fā)的過程中启涯,我們也許常常會用到一些固定參數(shù)或者是常量贬堵。對于這些較為固定、常用的部分结洼,我們通常會將其寫到一個固定文件中黎做,以免在不同的模塊代碼中重復(fù)出現(xiàn),進而保持核心代碼的有序整潔松忍。

這樣的固定文件我們可以直接寫成一個 .py 文件蒸殿,例如 settings.pyconfig.py,這種寫法能夠在同一工程下直接通過 import 來導(dǎo)入當(dāng)中的部分鸣峭;但如果需要在其他非 Python 的平臺進行配置文件共享時宏所,就不適宜再寫成單個 .py了 。那現(xiàn)在應(yīng)該怎么做呢摊溶?我們可以選擇通用的配置文件類型來作為存儲這些的固定部分爬骤。我們當(dāng)下常用且流行的配置文件格式類型主要有 inijson莫换、toml霞玄、yamlxml 等浓镜,這些類型的配置文件都可以通過標(biāo)準(zhǔn)庫或第三方庫來進行解析溃列。

ini

ini 即 Initialize 初始化之意,早期是在 Windows 上配置文件的存儲格式膛薛。ini 文件的寫法通俗易懂听隐,往往比較簡單,通常由節(jié)(Section)哄啄、鍵(key)和值(value)組成雅任,就像以下形式:

[localdb]
host     = 127.0.0.1
user     = root
password = 123456
port     = 3306
database = mysql

Python 本身內(nèi)置的 configparser 標(biāo)準(zhǔn)庫,我們直接就可以用來對ini 文件進行解析咨跌。如我們將上述內(nèi)容保存在一個名為 db.ini 的文件中沪么,然后使用 read() 方法來進行解析和讀取,最后通過 items() 方法來獲取指定節(jié)點下的所有鍵值對锌半。

>>> from configparser import ConfigParser
>>> cfg = ConfigParser()
>>> cfg.read("/Users/Bobot/db.ini")
['/Users/Bobot/db.ini']
>>> cfg.items("localdb")
[('host', '127.0.0.1'), ('user', 'root'), ('password', '123456'), 
('port', '3306'), ('database', 'mysql')]

需要注意的是禽车,configparser 默認(rèn)將值以字符串的形式呈現(xiàn),所以這也就是為什么我們在 db.ini 文件中沒有加引號而是直接將字面量寫在上面的原因。

獲取到鍵值對后殉摔,我其實直接就將其轉(zhuǎn)換成字典州胳,然后通過解包的方式進行穿參,保持代碼簡潔:

#!pip install pymysql
import pymysql
from configparser import ConfigParser

cfg = ConfigParser()
cfg.read("/Users/Bobot/db.ini")
db_cfg = dict(cfg.items("localdb"))

con = pymysql.connect(**db_cfg)

json

json 格式可以說是我們常見的一種文件形式了逸月,也是目前在互聯(lián)網(wǎng)較為流行的一種數(shù)據(jù)交換格式栓撞。除此之外,json 有時也是配置文件的一種碗硬。

比如 npm(JavaScript 包管理工具類似 Python 的 pip)瓤湘、以及微軟出品的目前被廣泛使用的 VSCode 編輯器,都使用 json 編寫配置參數(shù)恩尾。

configparser 一樣弛说,Python 也內(nèi)置了 json 標(biāo)準(zhǔn)庫,可以通過load()loads() 方法來導(dǎo)入文件式和字符串的 json 內(nèi)容翰意。

{
    "localdb":{
        "host": "127.0.0.1",
        "user": "root",
        "password": "123456",
        "port": 3306,
        "database": "mysql"
    }
}

我們將上述內(nèi)容保存為 db.json 后進行讀取和解析剃浇,json 庫讀取 json 文件相對簡單容易,而且很容易解析成 Python 的字典對象猎物。

>>> import json
>>> from pprint import pprint
>>> 
>>> with open('/Users/Bobot/db.json') as j:
...     cfg = json.load(j)['localdb']
... 
>>> pprint(cfg)
{'database': 'mysql',
 'host': '127.0.0.1',
 'password': '123456',
 'port': 3306,
 'user': 'root'}

使用 json 文件配置的缺點就是語法標(biāo)準(zhǔn)嚴(yán)格限制,為人所詬病之一的就是無法在當(dāng)中寫注釋角塑,除非采取 json 類型的其他超集作為替代方案(VSCode 中能寫注釋的 json 參數(shù)配置文件便是代替方案的一種)蔫磨;同時存在嵌套過深的問題,容易導(dǎo)致出錯圃伶,不宜用來寫過長或復(fù)雜的參數(shù)配置信息堤如。

toml

toml 格式(或 tml 格式)是 Github 聯(lián)合創(chuàng)始人 Tom Preston-Werner 所提出的一種配置文件格式。根據(jù)維基百科的資料窒朋,toml 最開始提出時是在 2013年7月份搀罢,距今已有七年時間;它在某些方面也與后面要談到的 yaml 文件有些類似侥猩,但如果當(dāng)你知道 yaml 的規(guī)范有幾十頁(沒有錯榔至,真的就是幾十頁……)的時候,可能你真的就不太愿意去寫那么復(fù)雜的配置文件欺劳,toml 格式則倒是個不錯的選擇唧取。

toml 格式大致如下:

image.png

01-toml樣式

從這里可以看出 toml 有點類似于前面所講的 ini 文件。但是它比 ini擴展了更多的內(nèi)容划提。

在樣例圖片中我們可以看到枫弟,除了基本的字符串以外,例如時間戳鹏往、布爾值淡诗、數(shù)組等都進一步支持,而且樣式和 Python 的原生寫法十分類似。

當(dāng)然這里不會過多介紹 toml 格式的一些規(guī)范說明韩容,有人已經(jīng)對官方的規(guī)范文檔進行了翻譯款违,有興趣的朋友可以直接查閱。

這么契合 Python 方式的配置文件類型已經(jīng)有開發(fā)者造出了相應(yīng)的「輪子」宙攻,目前在 Github 上 Stars 數(shù)最多的是則 uiri/toml 的版本奠货,不過該版本僅通過了 v0.5 版本 toml 規(guī)范,但在使用上還是蠻簡潔的座掘,我們可以通過 pip 命令進行安裝

pip install toml

該庫的解析方式很簡單递惋,也有點類似于 json 庫的解析用法,即通過load()loads() 來進行解析溢陪;同理轉(zhuǎn)換并導(dǎo)出也是同樣類似的用法萍虽。

比如我們現(xiàn)在將以下內(nèi)容寫入到 config.toml 中:

[mysql]
host     = "127.0.0.1"
user     = "root"
port     = 3306
database = "test"

  [mysql.parameters]
  pool_size = 5
  charset   = "utf8"

  [mysql.fields]
  pandas_cols = [ "id", "name", "age", "date"]

緊接著我們就可以通過 toml 庫中的 load() 方法來進行讀取:

>>> import toml
>>> import os
>>> from pprint import pprint
>>> cfg = toml.load(os.path.expanduser("~/Desktop/config.toml"))
>>> pprint(cfg)
{'mysql': {'database': 'test',
           'fields': {'pandas_cols': ['id', 'name', 'age', 'date']},
           'host': '127.0.0.1',
           'parameters': {'charset': 'utf8', 'pool_size': 5},
           'port': 3306,
           'user': 'root'}}

可以看到 toml 文件被間接地轉(zhuǎn)化成了字典類型形真,當(dāng)然這也就是 json版的寫法(將單引號替換成雙引號即可)杉编,方便我們后續(xù)調(diào)用或者傳參。

yaml

yaml 格式(或 yml 格式)是目前較為流行的一種配置文件咆霜,它早在 2001 由一個名為 Clark Evans 的人提出邓馒;同時它也是目前被廣泛使用的配置文件類型,典型的就是 Docker 容器里的 docker-compose.yml配置文件蛾坯,如果經(jīng)常使用 Docker 進行部署的人對此不會陌生光酣。

yaml 文件的設(shè)計從 Python、XML 等地方獲取靈感脉课,所以在使用時能很清楚地看到這些部分的影子救军。

在上一節(jié) toml 內(nèi)容里我曾提到,yaml 的規(guī)范內(nèi)容可以說是冗長和復(fù)雜倘零,足足有80頁之多(斗尊強者唱遭,恐怖如斯……)。

image.png

02-yaml規(guī)范頁數(shù)

所以感興趣的朋友可以再自行了解相關(guān)用法呈驶。

YAML 官方早已經(jīng)提供了相應(yīng)的 Python 庫進行支持拷泽,即 PyYAML;當(dāng)然也同樣需要我們事先進行安裝:

pip install pyyaml

json 庫和 toml 庫一樣俐东,通過 load() 方法來進行加載跌穗。

需要注意的是,使用 load() 方法會存在一定的安全隱患虏辫,從思科 Talos 的這份報告中我們可以看到蚌吸,如果加載了未知或不信任的 yaml文件,那么有可能會存在被攻擊的風(fēng)險和網(wǎng)絡(luò)安全隱患砌庄,因為它能夠直接調(diào)用相應(yīng)的 Python 函數(shù)來執(zhí)行為攻擊者所需要的命令羹唠,比如說在yaml 文件中寫入這么一段:

# 使用Linux和macOS的朋友不要輕易嘗試
!!python/object/apply:os.system ["rm -rf /"]

因此最好是使用 safe_load() 來代替 load() 方法奕枢。

這和 Python 內(nèi)置的 string 標(biāo)準(zhǔn)庫中 Template 類的 substitute()模板方法一樣存在著同樣的安全隱患,所以使用 safe_substitute()來替代是一樣的道理佩微。

如我們現(xiàn)在將之前的一些配置信息寫入 config.yaml 文件中:

mysql:
  host: "127.0.0.1"
  port: 3306
  user: "root"
  password: "123456"
  database: "test"

  parameter:
    pool_size: 5
    charset: "utf8"

  fields:
    pandas_cols: 
      - id
      - name
      - age
      - date

然后我們通過 safe_load() 方法進行解析:

>>> import os
>>> from pprint import pprint
>>> 
>>> with open(os.path.expanduser("~/config.yaml"), "r") as config:
...     cfg = yaml.safe_load(config)
... 
>>> pprint(cfg)
{'mysql': {'database': 'test',
           'fields': {'pandas_cols': ['id', 'name', 'age', 'date']},
           'host': '127.0.0.1',
           'parameter': {'charset': 'utf8', 'pool_size': 5},
           'password': '123456',
           'port': 3306,
           'user': 'root'}}

可以看到最后結(jié)果和前面的 toml 庫的解析結(jié)果基本一致缝彬。

寫在最后

本文列舉了一些主流且常見的配置文件類型及其 Python 的讀取方法,可能有的讀者會發(fā)現(xiàn)當(dāng)中沒有 xml 格式類型的內(nèi)容哺眯。對于 xml 配置文件可能與 Java 系語言打交道的朋友遇見得會多一些谷浅,但 xml 文件的可讀性實在是讓人望而生畏;對 xml 文件不了解的朋友可以使用 Chrome 瀏覽器隨便進入一個網(wǎng)站然后按下 F12 進入開發(fā)者后查看那密密麻麻的 html 元素便是 .xml 的縮影奶卓。

除了這些主流的配置文件類型之外一疯,像一些 .cfg.properties 等都可以作為配置文件夺姑,甚至和開頭提到的那樣墩邀,你單獨用一個 .py 文件來書寫各類配置信息作為配置文件進行導(dǎo)入都是沒問題,只是在跨語言共享時可能會有些障礙盏浙。因此本文就不過多介紹眉睹,感興趣的朋友可以進一步自行了解。

在本文里列舉的配置文件類型其復(fù)雜性由上到下依次增加:ini < json ≈ toml < yaml废膘,它們之間各有優(yōu)劣竹海,可以根據(jù)自己實際的需求和團隊協(xié)作要求來具體選擇。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末丐黄,一起剝皮案震驚了整個濱河市站削,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌孵稽,老刑警劉巖,帶你破解...
    沈念sama閱讀 218,036評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件十偶,死亡現(xiàn)場離奇詭異菩鲜,居然都是意外死亡,警方通過查閱死者的電腦和手機惦积,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,046評論 3 395
  • 文/潘曉璐 我一進店門接校,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人狮崩,你說我怎么就攤上這事蛛勉。” “怎么了睦柴?”我有些...
    開封第一講書人閱讀 164,411評論 0 354
  • 文/不壞的土叔 我叫張陵诽凌,是天一觀的道長。 經(jīng)常有香客問我坦敌,道長侣诵,這世上最難降的妖魔是什么痢法? 我笑而不...
    開封第一講書人閱讀 58,622評論 1 293
  • 正文 為了忘掉前任,我火速辦了婚禮杜顺,結(jié)果婚禮上财搁,老公的妹妹穿的比我還像新娘。我一直安慰自己躬络,他們只是感情好尖奔,可當(dāng)我...
    茶點故事閱讀 67,661評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著穷当,像睡著了一般提茁。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上膘滨,一...
    開封第一講書人閱讀 51,521評論 1 304
  • 那天甘凭,我揣著相機與錄音,去河邊找鬼火邓。 笑死丹弱,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的铲咨。 我是一名探鬼主播躲胳,決...
    沈念sama閱讀 40,288評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼纤勒!你這毒婦竟也來了坯苹?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,200評論 0 276
  • 序言:老撾萬榮一對情侶失蹤摇天,失蹤者是張志新(化名)和其女友劉穎粹湃,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體泉坐,經(jīng)...
    沈念sama閱讀 45,644評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡为鳄,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,837評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了腕让。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片孤钦。...
    茶點故事閱讀 39,953評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖纯丸,靈堂內(nèi)的尸體忽然破棺而出偏形,到底是詐尸還是另有隱情,我是刑警寧澤觉鼻,帶...
    沈念sama閱讀 35,673評論 5 346
  • 正文 年R本政府宣布俊扭,位于F島的核電站,受9級特大地震影響坠陈,放射性物質(zhì)發(fā)生泄漏统扳。R本人自食惡果不足惜喘帚,卻給世界環(huán)境...
    茶點故事閱讀 41,281評論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望咒钟。 院中可真熱鬧吹由,春花似錦、人聲如沸朱嘴。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,889評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽萍嬉。三九已至乌昔,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間壤追,已是汗流浹背磕道。 一陣腳步聲響...
    開封第一講書人閱讀 33,011評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留行冰,地道東北人溺蕉。 一個月前我還...
    沈念sama閱讀 48,119評論 3 370
  • 正文 我出身青樓,卻偏偏與公主長得像悼做,于是被迫代替她去往敵國和親疯特。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 44,901評論 2 355

推薦閱讀更多精彩內(nèi)容